Meta Berfungsi Untuk Membuat Quest 3 Bekerja Di Kendaraan Seperti Pesawat

Diterbitkan Ulang Oleh Plato

Followers: 0

Meta sedang berupaya membuat headset Quest berfungsi di kendaraan yang bergerak.

Desainer UX Andrew Fox mem-posting ulang sebuah video ke X dari pengguna Facebook Netsvietaiev Oleksandr mencoba untuk menggunakan Quest 3 dalam mode passthrough di pesawat, tetapi tidak dapat melakukannya karena antarmukanya hilang.

CTO Meta Andrew Bosworth menjawab ke postingan untuk meringkas mengapa hal itu terjadi, dan diakhiri dengan mengatakan Meta sedang "sedang mengerjakannya".

Tidak, kami menggunakan IMU untuk menjaga agar objek tetap terlokalisasi relatif terhadap gerakan headset Anda sehingga kendaraan yang bergerak merupakan sebuah tantangan (saat mereka berakselerasi ke segala arah). Kami juga menggunakan kamera, tentu saja, mereka bekerja sama karena IMU memiliki frekuensi yang lebih tinggi tetapi akurasinya lebih rendah. Sedang mengerjakannya!

- Boz (@boztank) Januari 24, 2024

Lalu mengapa sebenarnya drifting pada kendaraan yang sedang bergerak ini terjadi?

Orang sering berpikir bahwa sistem pelacakan luar-dalam tanpa penanda pada headset, kacamata, dan pengontrol pelacakan mandiri hanya menggunakan kamera, padahal sebenarnya tidak demikian. Sistem ini sangat bergantung pada unit pengukuran inersia (IMU), sebuah chip yang berisi akselerometer kecil dan giroskop.

Meskipun kamera biasanya berjalan pada 30Hz atau 60Hz, IMU biasanya memberikan pembaruan sekitar 1000Hz, sehingga memungkinkan latensi yang jauh lebih rendah. Namun, IMU tidak dapat mendeteksi pergerakan absolut – setidaknya tidak secara langsung. Akselerometer di IMU mendeteksi percepatan relatif terhadap gravitasi, dan Anda dapat menggunakan integral percepatan dari waktu ke waktu untuk mendapatkan kecepatan. Dan jika Anda mengambil integral dari nilai kecepatan tersebut dari waktu ke waktu, Anda mendapatkan perpindahan dari posisi semula.

Proses ini disebut perhitungan mati. Dari waktu ke waktu, setiap headset dan pengontrol melacak dirinya sendiri, dan komponen optik seperti kamera atau stasiun pangkalan laser hanya digunakan untuk memperbaiki kesalahan kumulatif yang disebabkan oleh kebisingan data IMU. Namun pada kendaraan yang bergerak seperti pesawat terbang, akselerometer akan mendeteksi percepatan kendaraan itu sendiri, mengira itu adalah percepatan headset, yang mengakibatkan pergeseran posisi secara tiba-tiba dan cepat seperti yang Anda lihat dalam video Fox di atas.

Apple Vision Pro memiliki Mode Perjalanan, tetapi tidak jelas apa sebenarnya fungsinya.

Tidak jelas apa sebenarnya maksud Bosworth dengan mengatakan Meta sedang “mengatasi” masalahnya.

Saat ini dimungkinkan untuk menonaktifkan pelacakan posisi 6DoF di Quest, dan headset akan kembali ke pelacakan rotasi saja 3DoF, tetapi itu juga menonaktifkan passthrough. Jadi Meta mungkin berencana untuk mengizinkan passthrough ketika pelacakan posisi dinonaktifkan.

Alternatifnya, Meta mungkin berupaya membuat pelacakan posisi berfungsi pada kendaraan yang bergerak, mungkin dengan menginstruksikan sistem untuk bergantung sepenuhnya pada visual kamera dan mengabaikan IMU. Meta tahun lalu mendemonstrasikan proyek penelitian membuat Quest Pro berfungsi di BMW yang bergerak, tetapi ini melibatkan antarmuka dengan IMU onboard mobil itu sendiri.

Sementara itu, Apple Vision Pro memiliki Mode Perjalanan untuk digunakan di pesawat terbang, dan Apple telah memasarkan kasus penggunaan ini, namun saat ini belum diketahui apa sebenarnya fungsi Mode Perjalanan Apple. Apple hanya mengatakan akan “menstabilkan visual”. Saya berencana menguji fitur ini dalam perjalanan pulang setelah menggunakan Vision Pro di New York.