BBC科研人员竟用AR将手语诠释员搬出屏幕

2019-05-07 05:22:43

[好文分享：www.ii77.com]

Esther｜撰文

[原创文章：www.ii77.com]

现现在，AR在电视、直播范畴已经找到一些应用，好比在本年初江苏卫视跨年演唱会上，薛之谦曾与用AR手艺打造的二次元歌姬洛天依一同上台表演，洛天依的形象只有在电视和现场屏幕里看到，而观众用肉眼是看不到的。

此外，美国ABC电视台在客岁曾用AR手艺播报中期选举，将选举数据酿成了酷炫的AR特效，CBS电视台在本年初也曾采用AR手艺直播超等碗赛事，观众们在屏幕中可看到用于辅助现场诠释的AR特效，为传统竞赛直播带来更多趣味性。

近期，英国BBC研发部门和德国IRT（无线电手艺研究所）的科研人员又找到了AR的另一项潜在应用，那就是为电视节目加上AR诠释员，为听力障碍者供应手语诠释。

与AR歌姬、赛事诠释分歧的是，这项应用是将AR诠释员放到了电视屏幕之外，而用户可经由AR头显来旁观。而这么做的优点是，几乎能够为任何电视节目到场AR真人手语诠释，可定制性充沛强。

此外，与传统CC字幕、在节目中经由分屏来展示手语诠释的体式比拟，AR诠释员不会遮挡屏幕、影响旁观体验，好比你想看的小细节若是被字幕遮挡，那你就需要关掉字幕，但若是是AR诠释员，就不会显现这种问题。

并且对于多人观众来讲，有些人或者并不需要看字幕，经由AR就能解决这个问题，为分歧的人定制分歧的电视体验。

关于手艺方案

手艺方面，AR诠释员与电视内容的同步是经由BBC的数字电视广播（DVB）同步手艺实现的，该手艺曾被用于DVB和HbbTV之间的旌旗传输与同步。

据悉，HbbTV手艺来自于一个雷同于电视神器Freeview Play那样的大电视..，它是一种与DVB兼容的内容发布..。

BBC和IRT的科研人员曾行使这些手艺做过多次展示，包罗将电视和平板电脑或玩具同步（孩子经由玩具做选择，能够在家里与电视里的部队一同回覆智力题，并对比答题究竟）等。

据科研人员称，AR诠释员的设计根蒂起原于传统分屏手语诠释，尤其是在创作、人形捕获和示意方面。

科研人员设计了半身和全身两种诠释体式，然后凭据需要诠释的视频内容拍摄手语诠释。接着，科研人员从拍摄的视频中抠出人像，做成960x1080差别率、彩..，然后叠加到黑色配景，接着经由剖析音频将手语诠释与视频内容同步。

关于AR手语诠释员的建造，这组科研人员总结出了一些经验：

AR手语诠释员的头部应该与电视一般高；
半身诠释员的底边应该与电视屏幕底边对齐，就像是位于电视柜上一般；
全身AR手语诠释员的脚不克穿过房间地面；
诠释员歇息的时候目光需要水平直视电视，而诠释的时候应该直面观众；
AR诠释员应该与电视稍微重叠。

左1列：传统手语诠释；左2列：半身AR诠释；右1：全身AR诠释

实验查询

为了认识公家对于这种手语诠释体式的反馈，这些科研人员邀请到23名实验介入者（11名英国人，12名德国人）来体验并对比三种同步手语诠释：内嵌在视频中的传统手语诠释、半身AR手语诠释和全身AR手语诠释。

介入者们旁观的电视节目是天然汗青记载片，佩戴的AR头显是微软HoloLens。

在体验事后，介入者应科研人员要求填写了查询问卷，表达对这些分歧诠释体验的反馈。在11名英国介入者对3种手语诠释体式的好感都差不多，而12名德国介入者中有一半喜欢传统手语诠释体式，而喜欢全身AR诠释员的只有1人。

在“HoloLens是否改变了你看电视习惯”问题上，8名介入者透露它带来了积极的改变，3名介入者透露带来了糟糕的体验。当然，也有人称没有带来任何改变。

在经由认识之后，本来介入者们认为戴AR头显看电视并不舒服，除了外形厚重外，一些介入者透露没法子同时佩戴眼镜，并且戴助听器也不轻易。

3名英国介入者透露甘愿接管天天甘愿在家里戴HoloLens看片子，而还有两名介入者透露想象不到戴HoloLens看完整部片子。还有一名介入者透露：戴HoloLens时间超长了，脖子会难熬。有些人透露进展能在HoloLens上添加缓冲垫，不外这一点已经在Hololens 2中获得认识决（到场了泡沫垫）。

并且HoloLens的视场角也不敷大，没法同时装下电视和AR手语诠释员。此外，介入者们还认为AR诠释员的位置还能够持续优化，而且进展这项手艺能够与他们正在使用的设备集成。

一名英国体验者称：我一向很等候能看到全息影像，但我不进展经由头戴的设备看，更进展它是经由外部设备投影的。

不外，不是所有的不舒适都是因为手艺或许身体局限。

好比，一位英国介入者透露：戴上这种头显很惹眼，看到的人就会知道你听力有障碍，我不进展将这一点展示出来。