加州程序员致力于Oculus Rift的情感识别系统

南加州大学的助理教授郝力发表了他的作品，这为虚拟世界带来了更多的现实感。他领导了一个系统的开发，通过该系统，虚拟现实头盔Oculus Rift可以实时读取用户的面部表情。

自古代计算机时代以来，表情符号已成为传达情感的主要手段。然后是网络摄像头和视频聊天，您可以在其中自由地看到对话者。但是，如果您需要将面部表情转换为虚拟现实怎么办？还是认识到使用此信息来渲染游戏头像的情感？

当然，存在用于视频的面部识别系统。就是说，使用虚拟现实眼镜（例如Oculus Rift）时，此任务要复杂很多倍。庞大的单元覆盖了脸部的2/3-在最佳情况下，相机会看到用户的嘴巴。该怎么办？

答案是由出生于德国，有着台湾血统的程序员，研究员和时装模特儿郝力发现的。他们由一群志趣相投的人组成，并在Facebook社交网络的严格支持下（于2014年购买了Oculus项目），他们为Oculus Rift用户开发了面部识别系统。



照相机可以识别脸部的下部。原型使用安装在眼镜大支架上的Intel RealSense 3D相机。也许在最终的设备中，有可能在眼镜底部安装一个微型相机。脸部上部的面部肌肉的工作由八个称重传感器（拉力传感器）识别，这些称重传感器围绕着周长以柔软的眼镜密封圈构建。从视频来看，该系统工作非常准确。

有了这样的系统，您可以在虚拟聊天和游戏中将情感转移到虚拟形象，或者例如在与NPC交谈时考虑面部表情。该系统通过新的逼真的细节对虚拟现实进行补充。



当然，原型中也有缺点。除了上面提到的不便的摄像机安装架（可以解决）之外，尽管需要针对特定​​用户进行初始“校准”，但您还必须做出一些表情，以便系统将特定人的真实数据与其模板相关联。但是，开发人员希望将来在各个人都拥有不错的“鬼脸”基础时，消除这一阶段。

另一个功能是系统要求。Oculus Rift本身对硬件也有要求，当然，该系统也有要求。要以30 FPS的速度正常运行，您将需要Core i7-4820K，32GB RAM和GTX980。

该系统很可能不会与第一副眼镜一起出现，经过长时间的开发，该眼镜将于明年年初上市。。