工业和信息化部主管 中国电子报社主办
收藏本站 投稿

AR/VR

VR实现互动是大方向 5G云引擎正在路上

以中国为主导力量,5G网络技术一路快马加鞭,在今年2月底的世界移动大会上,通信界已经向全球展示了基本成熟的产品和解决方案,2020年中国5G商用前景可期。与此同时,5G应用正在萌芽。VR/AR被认为会是5G的典型应用。在3月21日召开的5G应用征集大赛行业应用研讨会上,华为无线XLab实验室总裁王宇峰提出,与VR视频相比,实现人与人、人与物、物与物在物理世界与虚拟世界之间的交互将会更加颠覆人们的体验,也更符合万物互联的发展趋势,而实现这种交互的关键是在5G提供的网络能力基础上,架构一个云VR体系,支撑交互。

VR怎么用5G超带宽

面向未来的技术,从人们模糊有方向,到落地去实现,中间要走过万水千山。最后得到最广泛的应用又会是什么?就像人们无法预知4G中发展最好的是移动支付一样,我们无法现在预知5G的最好应用是不是VR,但初步梳理出方向,是现在应该做的,也是大量创新创业和风险资本应该关注的。

5G能够给VR带来什么?许多有VR体验的人会说,VR眼镜后面那根连接电脑的线会没有了。事实确实如此,但又不仅如此。王宇峰说,当年作为固话延伸的无绳电话,实现了在室内可以随意接打电话。由此启发而来的可漫游到室外接打的移动电话,现在竟然开启了一个移动互联网时代。

从技术上看,5G在三个方面会超越4G,首先是网速有近10倍的提升,用户可体验的网速也会达到300Mbps;其次是网络的时延缩短到1/10,一些特定应用可以只有几毫秒时延;最后是网络的连接能力有极大突破,一平方公里的连接数可以多达上百万。“以前人们认为与有线相比,无线的可靠性要差,实际上,5G的可靠性会超越我们的想象。”王宇峰认为,“5G能力的提升,使我们对未来应用的设计要从新的逻辑上重新思考。”

王宇峰说,VR应用可以分为两种,一种是将视频360度化,加上人体姿势信息,能够看到全景图像,这类应用包括家庭影院和演唱会、体育赛事的各种VR直播;另一种是时实的人与数字的沉浸式交互,也称为CG类VR,计算机根据人的动作,实时生成各种图像,实现人与虚拟世界的交互,这一类主要包括游戏、建模、虚拟社交等。

“实时生成而不是事先已经有的图像,目的是让人能够自由地穿梭于物理世界和数字世界之间,人脑中的数字世界不仅能够和计算机虚拟化的世界共存,而且能够让人脑中数字的虚拟世界通过自己的身体动作与物理世界互动,这是比较颠覆的,它不再是传统的把已经存在的VR虚拟给你看。”王宇峰说。

但目前CG类的实现比较主流的也是用PC机作为主处理器进行内容渲染,一个连接在PC机上的VR眼镜,使人可以看到虚拟出来的一个很炫的世界,但是这个世界中只有你一个人,除非几个人同时连接一个电脑,否则现在无法实现人与人之间的互动。这种应用其实与现在万物互联的潮流是背道而行的。

王宇峰说,华为与通信业企业认为VR发展有第三条路,就是云化VR,把目前在PC上做到的整体能力,包括处理、渲染、内容生成全部放在云上,云上的处理能力是弹性的。

“尽管现在云上还没有过多考虑GPU的集成,但包括亚马逊、英伟达在内,一些企业已经在做基于GPU集成的云,整个云的计算能力就是面向图像生成,这种云一旦构建完成,我们的镜端只需要一个显示设备。”王宇峰说,“如果多个终端都是经过云端渲染,是很容易实现虚拟化通信的,容易实现人与人、人与物、物与物的交互,因为大家是基于一个平台,交互就是在整理接口。”一个VR视频的数据量往往在5GB到8GB,而5G就是这种大带宽、低时延交互的保障。

云化VR技术规范开启探路者之旅

其实,在王宇峰所构想的云VR上,即使是接口的整理也并不简单,其中需要做大量标准化的事。“新技术、新标准、新生态”,将是云VR的三个路标。

日前,华为发布了CG类虚拟现实的云化VR技术规范,作为游戏、教育、互动类VR利用新架构做开发的参考。

技术规范中有一些关键指标,即假设到2023年,5G网络能够达到的指标,如端到端时延控制在5到8毫秒,丢包率低于0.05%%,下行带宽带大于100M,上行带宽大于5M。对编解码器性能要求达到上下行的压缩率大于40倍,编码和解码的单向时延小于1毫秒,陀螺仪、动作姿态刷新频率大于1KHZ。在这种环境下,要保证有比较好的用户体验,就需要端到端的时延控制在20毫秒之内,双眼分辨率达到3K以上,帧率大于90FPS。

王宇峰说,前期已经有公司在此投入,并有不小的进步,但其中的挑战也不言而喻。“我们认为这个产业要起来,还要解决包括芯片、标准、协议等各方面问题,乐观地估计也需要两到三年的时间,甚至更长的时间,但这条路已经打开。”

“我们在第一个原型机里做到每秒120帧,因为要和眼睛进行互动,电影用每秒28到32帧,靠视觉暂留可以是连续的,但互动时这个帧率是不够的,互动切换时帧率在100到120时才能满足视觉和身体的协同。”王宇峰说,我们在今年的世界移动大会上完成了首个5G 云VR的概念验证,可能是第一个真正意义的百兆eMBB业务,它基于技术规范开发,在5G真实环境测试,通过云端实现渲染。

画面是这样的:真实的人在虚拟世界里是登月宇航员,两个真实的人在不同的地方做出拿箱子的动作,在虚拟世界里是两个宇航员拿起来同一个箱子。整个动作很简单,画面也不太精致,但实现事,足够颠覆。

现在华为与其合作伙伴已经成立了Cloud VR/AR SIG,开展5G预商用网外场测试,推进从概念到商用的转化,促进应用生态的发展。SIG研究领域包括:低时延编解码技术、低时延GPU渲染云、5G CLOUD VR头显、Cloud VR创新应用和平台。

“我们希望通过一种新的架构突破数字世界、物理世界以及人人、人物、物物交互的束缚。”王宇峰说。

责任编辑:钟慧


声明

1、本站遵循行业规范,任何转载的稿件都会明确标注作者和来源;2、本站的原创文章,请转载时务必注明文章作者和来源,不尊重原创的行为我们将追究责任;3、作者投稿可能会经我们编辑修改或补充;4、如本站的文章或图片存在版权,请拨打电话010-88558835进行联系,我们将第一时间处理。

相关链接

视频

专题

聚焦2021年全国两会

3月5日,第十三届全国人民代表大会第四次会议在北京人民大会堂开幕。党和国家领导人习近平、李克强、汪洋、王沪宁、赵乐际、韩正、王岐山等出席,栗战书主持大会。初春的北京,处处生机盎然。第十三届全国人民代表大会第四次会议5日上午在人民大会堂开幕。近3000名全国人大代表肩负人民重托出席大会,认真履行宪法和法律赋予的神圣职责。

2021年全国工业和信息化工作会议

12月28-29日,全国工业和信息化工作会议在京召开。会议以习近平新时代中国特色社会主义思想为指导,全面贯彻党的十九大和十九届二中、三中、四中、五中全会精神,认真落实习近平总书记重要指示批示精神和中央经济工作会议部署,总结2020年工业和信息化工作,分析形势,部署2021年重点工作。工业和信息化部党组书记、部长肖亚庆作工作报告。

2020年中国家电市场报告

3月22日,中国电子信息产业发展研究院发布了《2020年中国家电市场报告》(以下简称《报告》)。《报告》显示,2020年,我国家电市场零售额规模达到8333亿元,在疫情冲击之下显示出较强的韧性;电商渠道对家电零售的贡献率首次超过50%,网络零售对家电消费的促进作用进一步提升;高端产品、生活家电大幅增长,有效促进了消费升级和产业转型。

世界超高清视频(4K/8K)产业发展大会

会议

2020世界显示产业大会

11月20日,由工业和信息化部、安徽省人民政府共同主办的2020世界显示产业大会在合肥市举行。在开幕式上,工业和信息化部部长肖亚庆、韩国驻华大使张夏成发表视频致辞。安徽省委副书记、省长李国英,工业和信息化部副部长王志军出席开幕式并致辞。

2020世界超高清视频(4K/8K)产业发展大会

11月2日,由工业和信息化部、国家广播电视总局、中央广播电视总台、广东省人民政府共同主办的2020世界超高清视频(4K/8K)产业发展大会在广州市召开。广东省委书记李希出席开幕式,省长马兴瑞出席并致辞。国家广播电视总局局长聂辰席、工业和信息化部副部长王志军、中央广播电视总台副台长蒋希伟出席开幕式并致辞。

2020世界VR产业大会云峰会

10月19日—20日,由工业和信息化部、江西省人民政府主办的2020世界VR产业大会云峰会在南昌举行。在10月19日的开幕式上,中共中央政治局委员、国务院副总理刘鹤发来书面致辞。江西省委常委、南昌市委书记吴晓军,工业和信息化部副部长王志军,江西省委书记、省人大常委会主任刘奇先后致辞。开幕式由江西省委副书记、省长易炼红主持。

世界显示产业大会

本周排行