眼球追踪low了!这家公司在研究面部识别与追踪技术

面部识别技术公司EmteqS在英国排前20名大学的Sussex的科技创新中心里,与传统技术不同,faceteq不是像facerig那样用摄像头来拍摄面部表情,然后分析重构面部动作,而是让设备贴着你的脸的地方的传感系统读取你的肌肉神经电信号、心率、皮肤反应等等参数,然后把它们转化为相关的表情。

00

这个科技平台正在制造VR和其他设备里的表情识别追踪技术,或许这是他们对自己的faceteq技术自信的表现吧。与传统技术不同,faceteq不是像facerig那样用摄像头来拍摄面部表情,然后分析重构面部动作,而是让设备贴着你的脸的地方的传感系统读取你的肌肉神经电信号、心率、皮肤反应等等参数,然后把它们转化为相关的表情。

这是VR技术的一块重要地区,尤其是现在整个行业都开始侧重于社交类游戏体验了。Facebook本月早些时候公布的Oculus Connect 3就有卡通角色来代替人类进行表情沟通。这也是相当早期的一个领域。就在这次演示结束后一个小时,Oculus的首席科研官Michael Abrash告诉观众说,想要做到完美的虚拟人形象,还有很长的路要走,其中表情追踪技术会非常重要。

02

其实Emteq的研发工作也确实尚在早期;现在这项技术不过开始了一年多,就已经开始彰显成效,不过一个更加先进的版本也即将到来。

“重要的是,要理解人类的表现,情感的表现和肢体的表现以及它们是怎么出现的,然后VR系统,AR系统和人工智能系统能据此实现什么功能,”Cox说,“透彻研究AR和VR技术,然后把人类的表情融合进去,这就是我们的任务。”

如今公司只有一个简单粗略地演示向大家解释工作。这支团队目前在用Oculus Rift DK2展示系统。但是我看到了电子工程师,Mohsen Fatoorechi的办公桌,他正在组装一台CV1的样品机,应该很快就会完工。

“一旦完成了,只要插上就能用。”Cox解释道。他同时还在计划一个Vive版本的,用简单的布线代替原本的塑料泡沫搭扣。这家公司还在试用Daydream平台。

我参观了faceteq技术改进过的DK2,里面事先有一个角色调整到了Fatoorechi的面部表情。首先他进入了一个基础编译环境,然后用某种调试方式获得了传感器的读数。界面左边是一大片面部表情供软件用户选择单独调试。调试过程是,首先用户做出一个特定面部动作,比如眨左右眼睛三次,这样系统就能记录下来读数反馈,从而进行机器学习。

emteq-render-1-

Fatoorechi还用眨眼来在菜单上进行选择。这个动作要盯着选择的选项1秒钟。在首次展示中,他坐在屏幕对面,屏幕里的女角色在镜像模仿他的一颦一笑。这并不是效果最好的案例。每次那个角色眨眼的时候感觉像是很痛苦似的。不过这不是这次演示的重点所在。虽然错误迭出,但是系统还是对Fatoorechi的表情做出了不错的反应,起码我能看出来他的脸部被头戴设备记录下来了。

我看到的另两个演示则把面部识别技术以我从未想到过的方式应用出来了。其中一个是影院观赏间。在这里,首席科研官Charles Nduka让我想到了,如果好莱坞拍摄时能用这个技术即时看到最后效果的话会多么有效。这就是Cox所谓“客观情绪分析”。除了电影还能应用在研究项目和游戏测试中去。你也可以跟好友们一起看东西,还能看到他们的反应如何。想象一下看喜剧之后大家一起开怀大笑的样子,或者被突然吓一跳的时候打个寒战。

111

另一个演示则要独特一些。Emteq开通了他们自己的Facebook账户,只要看一眼封面,就可以通过自己的表情定制聊天表情、Facebook一直在深入研究铜锭的情绪反应一段时间了,而且他们的系统提供了更加真实和迅速的交流方式,虽然这并不是维持友谊的完美方法。

随着这个演示,我有机会亲自一试这个技术。要知道我留了长发,所以对早期样品机会造成一些干扰。我首先测试了一下眨右眼,这是一个微微笑的轻松表情,而系统则还给我一个眉毛高挑的震惊表情。这让我不得不放弃了校准张嘴微笑这种表情,因为实在是不准。毕竟这是早期样品技术。

01

用我校准过的那些表情,我也生成了一个女角色的演示。令人印象深刻的是她很快就复制了我的眨眼和我眉毛的位置,还有前额皱起等面部变化,模仿了我的表情。系统记住了我做特定表情时的肌肉神经冲动,然后表现为相关的表情或者动作。

理想情况是faceteq技术能够发展到识别神经冲动,复制表情却无需提前校准这个过程。Cox指出这家公司追踪的技术能够捕捉到一些肌肉运动,但是摄像头追踪则做不到。如果你要校准的表情比较微小,那什么时候应该停止?多少肌肉神经冲动和反应足以构建一个完美无瑕的虚拟人物形象?

希望Emteq能够改进这个过程。上述的不是什么要责备的问题,而是未来努力的方向。

“这是一个基于数据的系统,”Nduka说道,“数据获得的越多就越是聪明。”

Emteq-4

我期待着下个月这个系统的改进。据Cox所言,这支团队同时也在利用电子眼科学研发一款追踪眼球的技术来完善这项科技,这就是“高度精确”的解决办法了。这并不足以解决一些关键问题,比如凹面渲染。但是这足以确定眼球看向的方位然后读取不论大小的表情。这样的话还要在目前基础上再加一次解析层。

Emteq现在正在利用手头上的东西。这家公司的技术正在医疗APP上使用,帮助一种叫“面瘫”的问题的患者。Faceteq还能与眼镜配套使用给你提供每天新闻和处理日常事务,比如在起床看看什么衣服搭配合适。

现在这家公司正在筹集种子基金。虽然Cox说从研究角度来说资金充裕。但是作为一个可能进入消费者市场的VR科技,它的选择不少,包括能像之前说过的直接植入头戴设备中去就行。

“我们前方道路还是很让人振奋的,”Cox说:“显然,还有很多工作要做,但是我们能展示更多的有趣的东西了,等到明年第一季度,我们将能有一个完工的系统,做出各种令人惊奇的效果。”

 

文章下二维码15

责任编辑:Catherine
分享到QQ 分享到微信

0 条评论

头像发表我的观点

取消

  • 昵称 *
  • 邮箱 *
  • 网址

登录

忘记密码 ?

切换登录

注册