Το Meta φέρνει σύντομα τα Photoreal «Codec Avatars» στην αναζήτηση;

Αναδημοσίευση από τον Πλάτωνα

Ακολουθούν: 0

Ένα εύρημα υλικολογισμικού υποδηλώνει ότι η Meta είναι σε καλό δρόμο για να φέρει τα φωτορεαλιστικά «Codec Avatars» στα ακουστικά Quest της.

Το Codec Avatars είναι το μακροχρόνιο έργο έρευνας και ανάπτυξης της Meta που στοχεύει να φέρει επανάσταση στην απομακρυσμένη επικοινωνία επιτυγχάνοντας πραγματικά πειστικά φωτορεαλιστικά avatar που οδηγούνται σε πραγματικό χρόνο από ακουστικά με αισθητήρες παρακολούθησης προσώπου και, τελικά, γυαλιά. Ο Μέτα αποκάλυψε πρώτα την ύπαρξη του έργου σε 2019, και έχει επιδείξει πολλές ενημερώσεις πιστότητας στα χρόνια από τότε καθώς και α ολόσωμη έκδοση.

[Ενσωματωμένο περιεχόμενο]

Σε αυτή τη συνέντευξη, δεν είναι σαφές εάν τα avatar αποκωδικοποιούνταν και αποδίδονταν επί του σκάφους ή εάν ένας υπολογιστής έκανε αυτή τη δουλειά. Ένα καλώδιο USB-C είναι συνδεδεμένο και στα δύο ακουστικά.

Ενώ τα Codec Avatars ανέκαθεν περιγράφονταν ως στη σφαίρα της έρευνας, ένα νέο εύρημα υποδηλώνει ότι θα μπορούσε τώρα να είναι σε καλό δρόμο για να φτάσει ως χαρακτηριστικό στα ακουστικά Quest.

Λάτρης της εικονικής πραγματικότητας Σελήνη βρήκε αναφορές σε Codec Avatars αποσυμπιάζοντας την έκδοση 62 του υλικολογισμικού Meta Quest, το οποίο είναι προς το παρόν διαθέσιμο στους δοκιμαστές στο Δημόσιο Δοκιμαστικό Κανάλι.

Οι επερχόμενες δυνατότητες του Quest έχουν ανακαλυφθεί με αυτόν τον τρόπο πολλές φορές στο παρελθόν. Μας λέει ότι η Meta εργάζεται για να ενσωματώσει μια δυνατότητα στα ακουστικά Quest. Ωστόσο, δεν μας λέει πόσο μακριά είναι το χαρακτηριστικό ή αν θα αποσταλεί ποτέ. Για παράδειγμα, Διαστημική αίσθηση έφτασε λίγους μήνες αφότου εντοπίστηκε στο υλικολογισμικό, ενώ QuestPro πήρε πάνω από ένα χρόνο. Και αναφορές σε μια ενσωμάτωση Discord και α Έργο Χιονοστιβάδα Η λειτουργία ροής cloud PC VR έχει εντοπιστεί εδώ και χρόνια, αλλά καμία δεν έχει αποσταλεί.

Τον Μάρτιο του περασμένου έτους, ο CTO της Meta Andrew Bosworth είπε η εταιρεία «σημείωνε πρόοδο» στην αποστολή Codec Avatars, αλλά προειδοποίησε ότι «είμαστε ακόμη χρόνια μακριά».

Συμβολοσειρές που βρέθηκαν στο υλικολογισμικό Quest της Luna.

Δεν είναι επίσης σαφές εάν αυτή η δυνατότητα αναπτύσσεται για υπάρχοντα ακουστικά Quest ή για μελλοντικό Quest Pro 2.

Τον Μάρτιο του περασμένου έτους, μια συνάντηση οδικού χάρτη υλικού Meta Quest διέρρευσε στο The Verge. Εκτός από τις αποκαλυπτικές λεπτομέρειες του Quest 3 και του επερχόμενου φθηνότερου ακουστικού που φημολογείται ότι θα ονομάζεται Quest 3 Lite, ο οδικός χάρτης που αναφέρεται ένα νέο ακουστικό Quest Pro «διέξοδος στο μέλλον» που θα περιλαμβάνει Codec Avatars.

Αλλά είναι πιθανό η Meta να σκοπεύει να φέρει Codec Avatars στο υπάρχον Quest Pro ή ακόμα και στο Quest 2 και το Quest 3.

Τα Avatar του Codec αποκωδικοποιούνται στο Quest 2 αυτόνομα.

Το 2021, οι ερευνητές του Meta απέδειξαν α σημαντικά πιο αποτελεσματική μέθοδο αποκωδικοποίησης των Avatars Codec. Στο Quest 2, η νέα μέθοδος θα μπορούσε να αποδώσει ένα Avatar Codec σε μια κενή σκηνή με πλήρη ταχύτητα 72 FPS, τρία Avatar κωδικοποιητών στα περίπου 63 FPS ή πέντε σε περίπου 43 FPS.

Πώς θα μπορούσαν, όμως, να οδηγηθούν αυτά τα άβαταρ στο Quest 2 και το Quest 3, τα οποία δεν διαθέτουν παρακολούθηση προσώπου και ματιών; Οι ερευνητές του Meta έχουν επίσης επιδείξει μια έκδοση του Codec Avatars που δεν απαιτεί παρακολούθηση προσώπου, και πρόσφατα ακόμη και μια έκδοση που δεν απαιτεί καθόλου παρακολούθηση. Αντίθετα, ο ήχος από το μικρόφωνο τροφοδοτείται σε ένα νευρωνικό δίκτυο που υπολογίζει την πιθανή στάση του προσώπου για το τρέχον μοτίβο ομιλίας.

Ωστόσο, είναι απολύτως πιθανό η Meta να θέλει να κρατήσει Codec Avatars για ένα μελλοντικό Quest Pro 2 αρκετά ισχυρό ώστε να υποστηρίζει τα Avatars Codec στο Αίθουσες εργασίας Horizon συναντήσεις και οδηγήστε τις με πραγματική παρακολούθηση προσώπων.

Ένα εξειδικευμένο εργαλείο σύλληψης που χρησιμοποιείται για τα υψηλότερης ποιότητας Codec Avatars.

Ανεξάρτητα από τα συγκεκριμένα ακουστικά Quest για τα οποία προορίζεται η δυνατότητα αποστολής Codec Avatars, η ποιότητα σχεδόν σίγουρα δεν θα είναι ίδια με τα πιο εντυπωσιακά demo του Meta, όπως π.χ. η συνέντευξη του Lex Fridman με τον Μαρκ Ζάκερμπεργκ. Αυτά τα demo, και εκείνη η συνέντευξη, χρησιμοποίησαν Codec Avatars που δημιουργήθηκαν χρησιμοποιώντας ένα εξειδικευμένο εργαλείο λήψης με περισσότερες από 100 κάμερες.

[Ενσωματωμένο περιεχόμενο]

Οι ερευνητές της Meta εργάζονται για να αντικαταστήσουν αυτή τη διαδικασία με σάρωση smartphone, απαραίτητο για την πραγματική αποστολή Codec Avatars σε κλίμακα, αλλά αυτό δίνει α χαμηλότερης ποιότητας αποτέλεσμα. Το Quest Pro 2 μπορεί να περιλαμβάνει μπροστινή οθόνη και αισθητήρες βάθους για ρύθμιση avatar όπως Το Apple Vision Pro χρησιμοποιεί για τα Personas του, αλλά αυτό εξακολουθεί να μην ταιριάζει με το εξειδικευμένο εξέδρα σύλληψης.

Ωστόσο, οποιαδήποτε έκδοση του Codec Avatars θα πρέπει να είναι μια δραματική βελτίωση σε σχέση με τα σημερινά avatars της Meta, τα οποία έχουν ένα βασικό στυλ τέχνης καρτούν που δεν θα μπορούσε να απέχει περισσότερο από τον φωτορεαλισμό. Θα παρακολουθούμε στενά το Meta τους επόμενους μήνες για τυχόν περαιτέρω υπαινιγμούς ότι τα Codec Avatars βρίσκονται στο δρόμο προς την παραγωγή.