Ali Meta kmalu prinaša fotorealistične 'kodečne avatarje'?

Ponovno objavil Platon

Spremljevalci: 0

Odkritje vdelane programske opreme kaže, da je Meta na dobri poti, da svoje fotorealistične 'Codec Avatarje' uvede v svoje slušalke Quest.

Codec Avatars je Metin dolgotrajni raziskovalni in razvojni projekt, katerega cilj je revolucionirati komunikacijo na daljavo z doseganjem resnično prepričljivih fotorealističnih avatarjev, ki jih v realnem času poganjajo slušalke s senzorji za sledenje obrazu in sčasoma tudi očala. Meta je prva razkrila obstoj projekta v 2019, in je pokazal več posodobitve zvestobe v letih od takrat, kot tudi a celotna različica.

[Vgrajeni vsebina]

V tem intervjuju ni jasno, ali so bili avatarji dekodirani in upodobljeni na krovu ali pa je to delo opravil osebni računalnik. Na obe slušalki je priključen kabel USB-C.

Medtem ko je bil Codec Avatars vedno opisan kot del raziskav, nova ugotovitev kaže, da bi lahko bil zdaj na dobri poti, da pride kot funkcija v slušalke Quest.

VR navdušenec Luna z dekompilacijo različice 62 vdelane programske opreme Meta Quest, ki je trenutno na voljo preizkuševalcem v javnem testnem kanalu, je našel sklicevanja na avatarje kodekov.

Prihajajoče funkcije Quest so bile v preteklosti večkrat odkrite na ta način. Pove nam, da si Meta prizadeva za integracijo funkcije v slušalke Quest. Vendar nam ne pove, kako daleč je funkcija ali ali bo sploh kdaj dejansko poslana. na primer Vesoljski občutek prispel nekaj mesecev po tem, ko so ga opazili v vdelani programski opremi, medtem ko QuestPro trajalo več kot eno leto. In sklicevanja na integracijo Discord in a Projekt Avalanche funkcijo pretakanja VR v računalnikih v oblaku so opazili že leta, vendar nobena ni bila poslana.

Marca lani je tehnični direktor Mete Andrew Bosworth je dejal podjetje je "napredovalo" pri pošiljanju Codec Avatarjev, vendar je opozorilo, "da smo še leta oddaljeni".

Strune, ki jih najdete v vdelani programski opremi Quest podjetja Luna.

Prav tako ni jasno, ali se ta funkcija razvija za obstoječe slušalke Quest ali prihodnji Quest Pro 2.

Marca lani je v The Verge pricurljal sestanek o strojni opremi Meta Quest. Poleg razkritja podrobnosti o Questu 3 in prihajajočih cenejših slušalkah, za katere se govori, da se bodo imenovale Quest 3 Lite, je omenjen načrt nove slušalke Quest Pro »izhod v prihodnost«, ki bo vključeval kodeke Avatarje.

Vendar je možno, da Meta namerava prinesti Codec Avatars v obstoječi Quest Pro ali celo Quest 2 in Quest 3.

Avatarji kodekov, ki se dekodirajo v samostojni igri Quest 2.

Leta 2021 so raziskovalci Meta dokazali a bistveno učinkovitejša metoda dekodiranja kodekov Avatarjev. Pri Questu 2 bi lahko nova metoda upodobila en kodek Avatar v praznem prizoru pri polnih 72 sličicah na sekundo, tri kodeke avatarje pri okoli 63 sličicah na sekundo ali pet pri okoli 43 sličicah na sekundo.

Toda kako bi lahko te avatarje uporabljali v Quest 2 in Quest 3, ki nimata sledenja obrazu in očem? Raziskovalci Meta so predstavili tudi različico Codec Avatars, ki ne zahteva sledenja obrazu, pred kratkim pa celo različico, ki sploh ne zahteva nobenega sledenja. Namesto tega se zvok iz mikrofona dovaja v nevronsko mrežo, ki oceni verjetno pozo obraza za trenutni govorni vzorec.

Kljub temu je povsem možno, da bo Meta želela rezervirati avatarje kodekov za prihodnji Quest Pro 2, ki bo dovolj zmogljiv za podporo avatarjem kodekov v Delovne sobe Horizon sestanke in jih vodite z resničnim sledenjem obrazom.

Specializirana oprema za zajemanje, ki se uporablja za najkakovostnejše kodeke Avatarje.

Ne glede na to, za katere posebne slušalke Quest je namenjena funkcija pošiljanja Codec Avatars, kakovost skoraj zagotovo ne bo enaka Metinim najbolj impresivnim predstavitvam, kot je npr. intervju z Lexom Fridmanom z Markom Zuckerbergom. V teh predstavitvah in tem intervjuju so bili uporabljeni avatarji kodekov, ustvarjeni s pomočjo specializirane opreme za zajemanje z več kot 100 kamerami.

[Vgrajeni vsebina]

Meta raziskovalci so si prizadevali nadomestiti ta proces s skeniranjem pametnega telefona, potrebno za dejansko pošiljanje avatarjev kodekov v velikem obsegu, vendar to daje a rezultat nižje kakovosti. Quest Pro 2 lahko vključuje sprednji zaslon in senzorje globine za nastavitev avatarja, npr Apple Vision Pro uporablja za svoje Persone, vendar se to še vedno ne bi ujemalo s specializirano opremo za zajem.

Kljub temu bi morala biti katera koli različica Codec Avatarjev dramatičen napredek v primerjavi s trenutnimi Metinimi avatarji, ki imajo osnovni risani umetniški slog, ki ne more biti dlje od fotorealizma. V prihodnjih mesecih bomo pozorno spremljali Meto za morebitne nadaljnje namige o Codec Avatars, ki so na poti produkcije.