Meta Working כדי לגרום ל-Quest 3 לעבוד בכלי רכב כמו מטוסים

הועלה מחדש על ידי אפלטון

עוקב: 0

Meta עובדת על כך שאוזניית Quest תעבוד בכלי רכב נעים.

מעצב UX Andrew Fox פרסם מחדש סרטון עד X של משתמש הפייסבוק Netsvietaiev Oleksandr מנסה להשתמש ב-Quest 3 במצב מעבר במטוס, אך לא יכול כי הממשק מתרחק.

ה-CTO של Meta, אנדרו בוסוורת' השיב לפוסט כדי לסכם למה זה קרה, וסיימו באמירה שמטה "עובדת על זה".

לא, אנו משתמשים ב-IMU כדי לשמור על אובייקטים מקומיים ביחס לתנועת האוזניות שלך, כך שכלי רכב נעים מייצגים אתגר (כאשר הם מאיצים לכל כיוון). אנחנו גם משתמשים במצלמות, כמובן, הן פועלות יחד מכיוון שה-IMU הוא בתדירות גבוהה יותר אך דיוק נמוך יותר. עובד על זה!

- בוז (@ boztank) ינואר 24, 2024

אז למה בעצם ההיסחפות הזו בכלי רכב נעים מתרחשת?

לעתים קרובות אנשים חושבים שמערכות מעקב מבפנים החוצה ללא סמנים באוזניות, משקפיים ובקרי מעקב עצמיים משתמשות רק במצלמות, אבל זה לא המקרה. מערכות אלו מסתמכות באותה מידה על יחידת המדידה האינרציאלית (IMU), שבב המכיל מד תאוצה זעיר וג'ירוסקופ.

בעוד שמצלמות פועלות בדרך כלל ב-30Hz או 60Hz, ה-IMU בדרך כלל מספק עדכונים בסביבות 1000Hz, מה שמאפשר חביון נמוך בהרבה. עם זאת, IMU לא יכול לזהות תנועה מוחלטת - לפחות לא ישירות. מד התאוצה ב-IMU חש בתאוצה ביחס לכוח הכבידה, ותוכל לקחת את האינטגרל של התאוצה לאורך זמן כדי לקבל מהירות. ואם אתה לוקח את האינטגרל של ערכי המהירות האלה לאורך זמן, אתה מקבל תזוזה מהמיקום המקורי.

תהליך זה נקרא חישוב מת. מרגע לרגע, כך כל אוזניות ובקר עוקבים אחר עצמם, והרכיב האופטי כמו מצלמות או תחנות בסיס לייזר משמשים רק כדי לתקן את השגיאה המצטברת הנגרמת כתוצאה מהרעש של נתוני ה-IMU. אבל ברכב נע כמו מטוס, מד התאוצה יקלוט את התאוצה של הרכב עצמו, מתוך מחשבה שזו תאוצת אוזניות, מה שמביא לסחף המיקום הפתאומי והמהיר שרואים בסרטון של פוקס למעלה.

ל- Apple Vision Pro יש מצב נסיעה, אבל לא ברור מה בדיוק הוא עושה.

לא ברור למה בדיוק מתכוון Bosworth באומרו שמטה "עובדת על" הבעיה.

נכון לעכשיו אפשר להשבית מעקב מיקום 6DoF ב-Quest, והאוזניות יחזרו למעקב 3DoF סיבוב בלבד, אבל זה גם משבית את המעבר. אז אולי Meta מתכננת לאפשר מעבר כאשר מעקב מיקום מושבת.

לחלופין, ייתכן ש-Meta פועלת איכשהו לגרום למעקב מיקום לעבוד בכלי רכב נעים, אולי על ידי הנחיה למערכת להסתמך לחלוטין על חזותי המצלמה והתעלמות מה-IMU. בשנה שעברה מטה הדגים פרויקט מחקר לגרום ל-Quest Pro לעבוד ב-BMW נע, אבל זה כלל התממשקות עם ה-IMU המובנה של המכונית.

בינתיים, ל-Apple Vision Pro יש מצב נסיעה לשימוש במטוסים, ואפל שיווקה את מקרה השימוש הזה, אבל כרגע לא ידוע מה בדיוק עושה גם מצב הנסיעה של אפל. אפל רק אמרה שהיא "תייצב את הוויזואליה". אני מתכנן לבחון את התכונה הזו במסע שלי הביתה לאחר שאסף את Vision Pro בניו יורק.