يعمل المبرمجون في كاليفورنيا على نظام التعرف على المشاعر لـ Oculus Rift

نشر هاو لي ، الأستاذ المساعد في جامعة جنوب كاليفورنيا ، أعماله ، مما جلب المزيد من الواقعية للعالم الافتراضي. و تقود تطوير نظام التي كوة المتصدع، خوذة الواقع الافتراضي، ويمكن قراءة تعبيرات الوجه المستخدم في الوقت الحقيقي .

منذ زمن الكمبيوتر القديم ، كانت الرموز التعبيرية هي الوسيلة الأساسية لنقل المشاعر. ثم جاءت كاميرات الويب ودردشات الفيديو ، حيث يمكنك رؤية المحاور بحرية. ولكن ماذا لو كنت بحاجة إلى نقل تعبيرات الوجه إلى الواقع الافتراضي؟ أو التعرف على العواطف لاستخدام هذه المعلومات لتقديم الصور الرمزية للعبة؟

بالطبع ، توجد أنظمة التعرف على الوجوه للفيديو. هذا فقط ، هذه المهمة أكثر تعقيدًا عدة مرات عند استخدام نظارات الواقع الافتراضي - مثل Oculus Rift. تغطي الوحدة الضخمة 2/3 من الوجه - في أفضل الأحوال ، سترى الكاميرا فم المستخدم. ماذا أفعل؟

تم العثور على الإجابة من قبل هاو لي ، وهو مبرمج وباحث ونموذج أزياء ولد في ألمانيا وله جذور تايوانية. من خلال فريق من الأشخاص ذوي التفكير المماثل وتحت رعاية شبكة التواصل الاجتماعي على Facebook (الذين اشتروا مشروع Oculus في عام 2014) ، طوروا نظام التعرف على الوجه لمستخدمي Oculus Rift.



تتعرف الكاميرا على الجزء السفلي من الوجه. يستخدم النموذج الأولي كاميرا Intel RealSense 3D مثبتة على حامل ضخم للنظارات. ربما في الجهاز النهائي سيكون من الممكن ترتيب كاميرا مصغرة في الجزء السفلي من النظارات. يتم التعرف على عمل عضلات الوجه في الجزء العلوي من الوجه من خلال ثماني خلايا تحميل (مستشعرات شد) ، مبنية حول المحيط في ختم زجاجي ناعم. من خلال الفيديو ، يعمل النظام بدقة تامة.

باستخدام مثل هذا النظام ، يمكنك نقل العواطف إلى صورتك الرمزية في الدردشات والألعاب الافتراضية ، أو مراعاة تعبيرات الوجه ، على سبيل المثال ، عند التحدث إلى NPC. يكمل النظام الواقع الافتراضي بتفاصيل واقعية جديدة.



بالطبع ، هناك سلبيات في النموذج الأولي. بالإضافة إلى تركيب الكاميرا غير الملائم المذكور أعلاه (والذي يمكن حله) ، في حين أن هناك حاجة إلى "المعايرة" الأولية لمستخدم معين ، سيكون عليك عمل بعض الوجوه حتى يربط النظام بين البيانات الحقيقية لشخص معين ونماذجه. لكن المطورين يأملون في القضاء على هذه المرحلة في المستقبل ، عندما يكتسبون قاعدة لائقة من "التجهم" من مختلف الناس.

ميزة أخرى هي متطلبات النظام. يتطلب Oculus Rift نفسه على الأجهزة ، وهذا النظام بالطبع أيضًا. للتشغيل العادي بسرعة 30 إطارًا في الثانية ، ستحتاج إلى Core i7-4820K و 32 غيغابايت من ذاكرة الوصول العشوائي و GTX 980. من

المرجح ألا يظهر النظام مع النسخ الأولى من النظارات ، والتي ستطرح للبيع بعد تطوير طويل في أوائل العام المقبل..