基于微软MRTK工具,Nreal推出升级版手势识别功能

青亭网( ID:qingtinwang )--链接科技前沿,服务商业创新

8月18日消息,Nreal宣布更新AR开发平台NRSDK,本次更新带来了升级的手势追踪API、眼球追踪SDK、手柄摇杆支持等新功能。据悉,Nreal利用AI技术来优化AR眼镜(Nreal Light、Nreal Air)的手势追踪功能,并在微软跨平台AR开发工具MRTK中引入对手势追踪API的支持。实际上,NRSDK使用的手势功能基于两个MRTK应用:Hand Tracking Hub和Startup Scene。

Nreal_Introduce_Hand_Eye_Tracking_API

据青亭网了解,Nreal上个月在AR眼镜产品中引入手势追踪功能,本次更新后,该功能将结合专门训练的深度神经网络,来检测用户双手在3D空间中的关键点位置。应用场景方面,Nreal通过优化手势识别技术,可能会为用户带来更加自然的广告交互体验。此前青亭网就报道,该公司预计在AR眼镜中引入广告功能。

而眼球追踪功能,猜测仅支持Nreal Light眼球追踪版,开发者可以通过更新的NRSDK为该设备开发基于眼球追踪的AR应用。

总之,本次更新带来了多项与交互、用户体验、UI相关的新功能,具体如下:

  • 手势交互,包括按钮、对象缩放和滚动
  • 手部骨骼网格和手势
  • 眼球追踪
  • 平面检测
  • 语音转文字
  • 手势菜单UI
  • 摇杆支持
  • 非本机键盘支持
  • 预加载资产,如熔岩和照明
  • 预加载的对象,例如钢琴

参考:XRToday

更多精彩内容,关注青亭网微信号(ID:qingtinwang),或者来微博@青亭网与我们互动!转载请注明版权和原文链接!
青亭网

微信扫码关注青亭网

青亭网

青亭 | 前沿科技交流群01

责任编辑:小新
分享到QQ 分享到微信

登录

忘记密码 ?

您也可以使用第三方帐号快捷登录

Q Q 登 录
微 博 登 录
切换登录

注册