קוביות פשוטות מציגות שינויים בזמן ריצה מונעי בינה מלאכותית ב-VR

קוביות פשוטות מציגות שינויים בזמן ריצה מונעי בינה מלאכותית ב-VR

צומת המקור: 2688981

מפתח AR ו-VR [Skarredghost] די התלהב מקובייה כחולה וירטואלית, ומסיבה טובה מאוד. זה סימן אב טיפוס מוצלח של חווית מציאות מוגברת שבה ההיגיון שבבסיס הקוביה כאובייקט וירטואלי היה שונה על ידי AI בתגובה להנחיות מילוליות של המשתמש. אמירת "הפוך את זה לכחול" אכן הפכה את הקוביה לכחול! (אחרי קצת זמן חשיבה, כמובן.)

זה לא נעצר שם, כמובן, והוכחת הקובייה הכחולה הובילה למספר הדגמות פשוטות. הראשון מציג שורה של קוביות שמשנות את צבען מאדום לירוק בתגובה לעוצמת הקול המוזיקלית, לאחר מכן חבילת קוביות משנה גודל בתגובה לעוצמת המיקרופון, וקוביות אפילו מתחילות להסתובב בחלל.

התוכנית מקבלת קלט מדובר מהמשתמש, ממירה אותו לטקסט, שולחת אותו למודל AI בשפה טבעית, אשר לאחר מכן יוצרת את השינויים הדרושים ומטעינה אותו לסביבה כדי לבצע שינויים בזמן ריצה ב-Unity. זרימת העבודה מעט מסורבלת ומדגישה רבים מהאתגרים הכרוכים בכך, אבל היא עובד וזה די נחמד.

אל האני מאגר GitHub נמצא כאן וסרטון הדגמה טוב מוטבע ממש מתחת למעבר העמוד. יש גם סרטון עם דיון הרבה יותר מעמיק של מה שקורה וחקירה גלויה של האתגרים הטכניים.

אם אתה מעוניין בכיוון הזה, נראה ש-[Skarredghost] ריכז את הפרטים הרלוונטיים. והאם יש לך רעיון אב-טיפוס שאינו בהכרח AR או VR אבל יהנה מזיהוי דיבור בעזרת AI שיכול לפעול באופן מקומי? לפרויקט הזה יש את מה שאתה צריך.

[תוכן מוטבע]

בול זמן:

עוד מ האק ליום