七维科技殷元江:5G将推动体积捕捉视频,进入实时交互媒体时代

青亭网( ID:qingtinwang )--链接科技前沿,服务商业创新

2019年5月17日,由青亭网主办,中国虚拟现实与可视化产业技术创新战略联盟、北京图象图形学学会支持的“5G元年的AR/VR变革·2019第三届全球虚拟现实产业创新者峰会”在北京湖南大厦举行。

本届峰会重点关注在AR/VR+商业应用范畴,同时邀请众多AR/VR行业专家、公司高管、知名学者以及相关垂直行业的的代表,共同探讨在AI、5G、大数据时代,AR/VR技术应用在不同行业带来的革新,以及商业应用趋势和未来。

七维科技创始人殷元江

本次峰会,七维科技创始人兼CEO殷元江带来《5G对娱乐内容生产的影响》主题演讲,为大家分享了有关5G和娱乐内容的一些思考。

我的分享主题是《5G对娱乐内容生产的影响》。七维科技成立于2014年,公司成立的初衷,就是为娱乐内容而服务。公司成立之初我们做了一个跨界的事情,现在更普及一点了。我们在2014年央视《我爱世界杯》栏目中,呈现了实时直播的AR互动。之后逐渐形成了自己服务于内容产品的服务体系。5G顾名思义就是高带宽、高分辨率、低延迟,它的低延迟带来了更高、更连贯性、更临场的互动性。我们自己服务于各类内容厂商,包括电影、电视等。光线传媒也是我们的股东,他们是影视的龙头公司,我们会为他们电影和电视剧制作提供虚拟影棚技术支持和服务。

从内容形式分类上,我们看的是网剧、电视剧、电影、短视频直播、秀场、电竞、综艺节目、体育、演唱会等等。5G将给娱乐内容的分类带来什么样的变化呢?在带宽大幅度增加,且延迟大幅度降低的情况下,互联网化的内容会向着更高互动、更高参与度的方向去发展。比如现在能够秒开的视频直播,在5G环境下4K、8K的直播是不是也可以秒开,可以高并发呢?在2016年七维科技就实现了在VR直播中产生互动,我们可以把拼接的算法与市面上主流的各种相机相结合,同时当时可以产生4K分辨率的直播流,在4K分辨率的直播流当中我们可以植入可互动特效。内容呈现也是高带宽带来的优势和艺术,包括超高清分辨率,特指4K以及8K分辨率。

七维科技 (1)

另外在画幅大量增加以后,大家对画面质量以及内容质量有了更高的需求与要求。真实画面的清晰度是靠相机厂家,比如索尼、松下等,用更好的硬件来支持实拍;而在8K、4K里实时直播中的特效合成、数据展示,在线图文,就需要更高的分辨率和更高的渲染能力,特别是里面的三维粒子。这是现在最大的一个需求,我们最早在2012年开始做基于照片级的实时渲染引擎,用来做内容生产。它不止是用于游戏,大家也看到了这个趋势,从前年虚幻引擎,包括主流的游戏引擎开始重视影视内容的生产。

最终游戏与影视之间的界限会越来越模糊,他们能提供实时的内容,质量会逐步满足影视级的要求。在2012年我们做了直播系统,是基于Cry引擎,目前已支持自己的核心引擎及虚幻引擎。同样可以在4K分辨率渲染精美的画面,还可以合成,实时的摄影机跟踪,把一些视频技术融合在一起,形成内容生产的工具矩阵。离线的工作流是否会变化呢?这儿指的是5G环境下。5G的特性代表了内容工具厂商,有一个大的趋势。过去几年里面大家能看到Adobe在云端制作化上走得非常靠前。比如Photoshop、Premiere这类视频制作产品相对来说轻量化。它不会有大量的素材需要上传与下载,当然也存在带宽的需求。

七维科技 (2)

在5G的情况下,更重度的视频和内容制作软件,包括三维制作软件,虽然之前也在发生,但是云端在国内的推广还是有一些阶段。目前VR还是没有一个标准的视频格式和分辨率,可能存在除了视频之外,也可以传输深度信息。微软现在也在推动全息体积捕捉技术,它除了传输视频每一帧的颜色信息之后,还传输体积信息、点云信息及多边形的模型信息,并且谷歌和微软也在推动。因为视频是非常标准化的,在视频传输和转码,大家从过去的H.264逐步过渡到H.265,以后大家会用更好分辨率,同等质量下可以减少带宽的新技术,来传输高质量的内容,这是标准化的视频传输。

在5G环境下是不是可以产生新的形式呢?像之前的体积捕捉和体积采集的视频。比如一个被体积采集的明星,可以站在你的VR/AR头显里站在你的面前,同时不需要下载,可以实施传输。这些都是可以遇见,可以发生的,可以用在娱乐内容,也可以用在会议直播上。上周我们在广州做了一个4K和8K的直播,把我们的一系列产品包括视频渲染引擎和VR产品都融合到云端上。去年我们完成了阿森纳的项目,采集了阿森纳球队的球员信息,大家可以在头显里面或者AR简单应用里面,可以体验与球员的一些真实互动。

七维科技 (3)

我们是一家专注于计算机视频图形图像技术的公司,从2012年的《豪门盛宴》到2015年的春晚,到国内首次的CBA的全明星直播VR直播等等,我们有了大量的案例,产生一系列为内容服务的产品矩阵。我们服务的大部分是广电媒体,以及新媒体互联网视频的客户。像春晚里面,现在流行的AI的主播,我们在2015年羊年春晚首次实现了虚拟主播。撒贝宁和当时的虚拟主持人阳阳产生了非常丰富的直播与互动。这是我们的产品矩阵,包括视频渲染引擎,它包含了融合媒体演播室、超高清虚拟演播室,全媒体演播室等,应用主要是广电媒体、互联网媒体等等;我们的Vipano实时缝合软件,支持各类相机实时的拼接,可以支持360°、180°立体不同的全景视频处理;以及三维呈现和体积采集等产品。这是我们的转码,支持4K的实时多码率转码。这是我们的应用范围,包括影视类生产、体育、广电、综艺节目等等。

七维科技 (5)

我们不止是实时的拼接,同时在实时的直播里面加入丰富的虚拟特效。这是体积采集的尝试,可以实时生成带有图像和颜色信息的三维模型、动态模型,并且在5G环境下可以直接做到实时的传输。这是我们的实时转码系统,可以支持摄像机的存储卡、文件系统的转码,也有直播里面的4K高清转码,以及基于图像增强高清转4K。因为目前来说市场对4K内容需求量非常大,我们对存量内容提出了解决方案,对原有的高清内容进行实时转制,或者通过离线压缩进行非常快速的转制,这些都是通过深度学习技术,将原有的低质量内容转成高质量的视频。

公司从2014年成立到现在,始终为内容服务,为了产生更好更优质的娱乐内容,也是跟各方进行合作。也是希望依托我们的技术,为内容服务,未来提供更多的工具给大家,希望未来有更多的合作伙伴。

更多精彩内容,关注青亭网微信号(ID:qingtinwang),或者来微博@青亭网与我们互动!转载请注明版权和原文链接!
青亭网

微信扫码关注青亭网

青亭网

青亭 | 前沿科技交流群01

责任编辑:hi188
分享到QQ 分享到微信
切换注册

登录

忘记密码 ?

您也可以使用第三方帐号快捷登录

Q Q 登 录
微 博 登 录
切换登录

注册