MIT新研究：用神怪的外形和颜色，来让VR里的同伙认识你的情绪

hi188｜ 撰文 [原创文章：www.ii77.com]

本年3月时Facebook曾透露，为认识决VR头像缺乏生气、不敷形象的问题，Reality Lab欲经由3D动捕手艺来捕获用户正确的面部脸色和情绪，打造真切的动态VR头像。从演示视频中来看，其系统对夸张的人脸运动可实现正确捕获，头像外形与真人的相似度也很高。

当然以现有的手艺，Facebook的这款头像系统还难以普及，并且其对于细微脸色的模拟或者也没有那么好。

发现者Bernal谈道理

看起来，距离在VR中实现真正的“数字两全”还有很长一段距离，但这并不故障我们去测验。好比近期，美国麻省理工学院媒体实验室流体界面小组的一名博士生Guillermo Bernal，他就依靠本身研发的VR情绪感知与示意系统Emotional Beasts获得了该校年度Harold与Arlene Schnitzer视觉艺术奖第一名。

据认识，Bernal的研发功效其实是一个两部门解决方案，首先，Bernal在VR头显上到场多个微型生物传感器，并配备一个情绪感知头盔，接着，将传感器收集到的微动作数据传输给Emotional Beasts系统，转化成在VR中可视化的色彩或纹理。

Emotional Beasts对于分歧情绪的示意

Bernal进展经由Emotional Beasts来表达人的细微情绪，好比：即将生气的模样、不由得激动而作对的模样、郑重又好奇的模样，不外这些面部情绪并不是经由对用户脸色的复制来完成，而是采用了奇特的体式。

从视频和图片来看，该解决方案不管是硬件外形，照样软件画风都充沛硬核，密集惧怕症、尖端惧怕症患者看了应该会很难熬。至于为什么要这么设计呢，也许是出于对艺术和功能的考量，不外抛开它们艳丽的色彩和华美的外形，Bernal在该方案中到场了很多巧思，就让我们一一来看看。

用于VR头显的传感器

添加定制传感器的HTC Vive

Bernal的情绪感知系统设计十分周详，他在一台HTC Vive VR头显加了一层搭载微型传感器的柔性印刷电路板，上面的传感器可识别大脑旌旗（EEG等）、皮电运动、声带和肌肉运动还到场红外线眼球追踪传感器，在头显的泡棉皮相，他还加上了干电极，用于检测用户额头的皮肤张力，以及皮肤水分（是否出汗），这些数据可显露出用户是否情绪感动。太阳穴位置上的泡棉上还到场了心跳检测器，并且Bernal还将Vive的麦克风到场了识别语气的功能。

除了革新的头显，Bernal还研发了一种五光十色的尖顶帽子（戴上去仿佛酿成外星人），这款帽子的特点是非常柔软，其搭载光学纤维，在识别到用户运动后，会释放分歧图案的LED光，供传感器识别。Bernal称：帽子上LED灯的道理与神经收集从大脑中释放微伏旌旗很像。

搭载光学显微的布料帽子

关于Emotional Beasts系统

传感器在收集到大量旌旗后，会传输到运行特别算法的单片机中进行较量，为Emotional Beasts情绪示意系统供应用户的多种信息，如：身体状况、焦虑和压力/兴奋品级，并推算用户行为和决意与生理状况改变的关系。

接着，Emotional Beasts会经由开源的Unreal图形引擎将这些情绪和身体数据衬着成3D可视化的人像纹理（看起来十分抽象），也就是说，VR虚拟形象的外观采用凭据情绪而转变的线条或外壳，好比：康乐和悲痛可经由线条收缩和颜色的转变来表达。同时，Bernal也提出经由3D颗粒来示意用户情绪，VR形象外表的颗粒可经由颜色、亮度来显露情绪指数（生气的时候可酿成红色）。

关于挑战与时机

尽管Emotional Beasts的道理听起来很酷，但人类的情绪自己十分复杂，这一点Bernal也认可，提高情绪识别和较量的正确性依靠大量数据支撑。究竟，并不是每小我示意情绪的体式都ianyan沟通，就比如一个西方白人和一个亚洲中年女子，他们表达气愤的体式一定有很大区别，文化和地区对其有很深影响。

因为生物信息属于用户隐私，是以很难在市面上找到公开数据，是以Bernal规划在本年炎天斥地一款简略版Emotional Beasts系统，供全球用户测试。他进展经由这种体式，在获得许可的情形下正当获取人类情绪信息，建立一个全球情绪数据库。

关于将来应用场景，Bernal认为除了VR社交，Emotional Beasts还能够连系AI系统，来识别早期精神疾病。切实，今朝已经有公司在用VR头显来识别自闭症、阿尔茨海默症等.HoloLens结合发现者Avi Bar-Zeev此前也透露：经由连系眼球追踪、EEG、皮电回响、脉搏和血压传感器，VR在情绪识别上也会大有作为。

（END）

 

天天五分钟，轻松认识前沿科技。    
         —— 青亭网