مجتمع-استثمار-تحدي-مشروع-درجات-20-مليون-زيادة-بقيادة-بواسطة-a16z.png

يمكن أن يكون لخوارزمية تجميع العرض المذهلة آثار هائلة على التقاط الواقع الافتراضي

عقدة المصدر: 1865042

بقدر ما يتعلق الأمر بفيديو الواقع الافتراضي ، فإن الفيديو الحجمي هو المعيار الذهبي للانغماس. وبالنسبة لالتقاط المشهد الثابت ، ينطبق الأمر نفسه على القياس التصويري. لكن لكلتا الطريقتين قيودًا تنتقص من الواقعية ، خاصة عندما يتعلق الأمر بالتأثيرات "المعتمدة على العرض" مثل الإبرازات المرآوية والعدسات من خلال الكائنات الشفافة. يُظهر البحث الذي أجراه معهد Vidyasirimedhi للعلوم والتكنولوجيا في تايلاند خوارزمية توليف عرض مذهلة تعزز الواقعية بشكل كبير من خلال التعامل مع تأثيرات الإضاءة بدقة.

نشر باحثون من معهد Vidyasirimedhi للعلوم والتكنولوجيا في Rayong Thailand العمل في وقت سابق من هذا العام على خوارزمية تجميع عرض في الوقت الفعلي تسمى NeX. الهدف هو استخدام عدد قليل من الصور المدخلة من مشهد لتوليف إطارات جديدة تصور المشهد بشكل واقعي من نقاط عشوائية ما بين الصور الحقيقية.

كتب الباحثون Suttisak Wizadwongsa و Pakkapon Phongthawee و Jiraphon Yenphraphai و Supasorn Suwajanakorn أن العمل يعتمد على تقنية تسمى الصورة متعددة المستويات (MPI). مقارنة بالطرق السابقة ، يقولون إن نهجهم أفضل نماذج التأثير المعتمد على العرض (مثل الإبرازات المرئية) ويخلق صورًا مركّبة أكثر وضوحًا.

علاوة على هذه التحسينات ، قام الفريق بتحسين النظام بشكل كبير ، مما سمح له بالعمل بسهولة عند 60 هرتز - وهو تحسن مزعوم بمقدار 1000 ضعف عن حالة الفن السابقة. ولا بد لي من القول أن النتائج كانت مذهلة.

على الرغم من أنه لم يتم تحسينه بشكل كبير لحالة الاستخدام ، فقد اختبر الباحثون بالفعل النظام باستخدام سماعة رأس VR ذات عمق استريو وحركة 6DOF كاملة.

استنتج الباحثون:

تمثيلنا فعال في التقاط وإعادة إنتاج التأثيرات المعقدة المعتمدة على العرض وفعال للحوسبة على أجهزة الرسومات القياسية ، مما يسمح بالعرض في الوقت الفعلي. تُظهر الدراسات المكثفة حول مجموعات البيانات العامة ومجموعة البيانات الأكثر تحديًا جودة أسلوبنا الحديث. نعتقد أنه يمكن تطبيق توسيع الأساس العصبي على المشكلة العامة لعامل المجال الضوئي وتمكين العرض الفعال لتمثيلات المشهد الأخرى التي لا تقتصر على MPI. يمكن أن تساعد رؤيتنا القائلة بأنه يمكن تحسين بعض معلمات الانعكاس والملمس عالي التردد بشكل صريح في استعادة التفاصيل الدقيقة ، وهو التحدي الذي تواجهه التمثيلات العصبية الضمنية الحالية.

يمكنك العثور على الورقة الكاملة على موقع مشروع NeX، والتي تتضمن عروض توضيحية يمكنك تجربتها بنفسك في المتصفح. هناك أيضًا عروض توضيحية مستندة إلى WebVR تعمل مع سماعات رأس VR للكمبيوتر الشخصي إذا كنت تستخدم Firefox ، ولكن للأسف لا تعمل مع متصفح Quest.

لاحظ الانعكاسات في الخشب والأشكال المعقدة في مقبض الإبريق! التفاصيل التي تعتمد على العرض مثل هذه صعبة للغاية بالنسبة لطرق الالتقاط الحجمي والتصويري الحالية.

عادةً ما يكون التقاط الفيديو الحجمي الذي رأيته في الواقع الافتراضي مرتبكًا جدًا بشأن هذا النوع من التأثيرات المعتمدة على العرض ، وغالبًا ما يواجه مشكلة في تحديد عمق الاستريو المناسب للإبرازات المرئية.

أسلوب القياس التصويري ، أو "مسح المشهد" ، عادةً ما "يخبز" إضاءة المشهد في نسيج ، مما يجعل الكائنات شبه الشفافة تبدو مثل الورق المقوى (نظرًا لأن أضواء الإضاءة لا تتحرك بشكل صحيح وأنت ترى الكائن من زوايا مختلفة).

يمكن لأبحاث NeX view التوليفية أن تحسن بشكل كبير من واقعية الالتقاط الحجمي والتشغيل في الواقع الافتراضي من الآن فصاعدًا.

المصدر: https://www.roadtovr.com/nex-view-synthesis-algorithm-vr-capture-volumetric-light-field-photogrammetry/

الطابع الزمني:

اكثر من الطريق إلى الواقع الافتراضي