VR全景声引擎,在家也能欣赏音乐会

ab38b1cacb0389d831b8d25a73634efe_meitu_2

当人们沉浸在虚拟现实(VR)视觉的震撼效果中时,很多人似乎忽略了VR的声音。在VR内容中沉浸感不仅产生于视觉部分,还来源于听觉部分。近日,专注于虚拟现实音频领域的时代拓灵宣布,推出针对“VR全景声”内容制作者的免费开发者工具包“TwirlingVR Audio SDK”,可以使VR内容更方便的集成到VR头盔、VR 硬件供应商、VR平台播放器,或定制专属的VR内容应用。

VR内容体验中50%靠声音

影视行内有句话,“没声音再好的戏也出不来”。而在全景视频当中,声音的作用则显得更为重要。根据传统经验,正常观影之下70%左右的体验靠的是视觉,30%靠声音。

而在VR视频的体验中,50%都要依靠声音。因为在360度这样接近现实的立体全景环境中,人们非常依赖声音的空间定位感,这是人类对于声音的“自然本性”所致。

全景声可再现引人入胜的多维声音,实现声场包围,展现更多声音细节,提升观看视频者的感受,打造即便在家里也能体验得到的身临其境的感受。譬你在VR游戏中启用全景声,你将可以精准的定位刚刚从你头顶上飞过的飞机或者躲在暗处的狙击手。它的基本目标就是要让声音成为你的武器。

高效算法精准还原虚拟声源

与立体声被动式的接收不同,VR全景声需要满足观众头部旋转时实时调整声音角度的需要,最大程度的创造沉浸式的体验。实现这样理想的效果,无论从数据采集、数据处理上都是难度很大、要求很高的。

“TwirlingVR Audio SDK”利用自主知识产权的全景声场算法,精确还原全景声场中所有声源的位置、方向、距离和运动轨迹等重要信息。得益于高效的架构,在处理复杂场景上TwirlingVR Audio SDK的效率上大大高于类似产品。理论上可以同时提供128轨的音频,不错过任何声音细节,并根据陀螺仪给出的头部旋转和位置等信息,随时加入音源,并实时渲染。SDK支持头部旋转和移动下的声场重建,利用头部运动的信息,实时调整声场方向,位置和距离,使用户仿佛置身于实际环境之中,感受不到耳机的存在。

成熟商业解决方案

据了解,“TwirlingVR Audio SDK”开发包的核心主要由动态链接库组成,提供的API接口可以帮助开发者很容易集成到各类应用,产品或系统里。另外SDK开发包里还包含必要的文档,代码示例和Demo,帮助开发者很快上手。

“TwirlingVR Audio SDK”支持多种VR360声场录音的渲染,如 Ambisonic 和人头录音,后期制作分轨音源,同时支持将传统立体声转变成适合VR声音播放的声音格式。除了耳机模式,该款SDK还提供扬声器模式,用户通过一对扬声器也可以体验全景声的效果。

文章下二维码15

责任编辑:
分享到QQ 分享到微信

0 条评论

头像发表我的观点

取消

  • 昵称 *
  • 邮箱 *
  • 网址

登录

忘记密码 ?

切换登录

注册