一场嵩山少林直播，看中国电信天翼云如何引领VR产业发展

足不出户就能身临其境，尽赏祖国大江南北的精彩人文和美景！

这样的情景正真切的发生在我们身边，为了响应疫情防控下的政府号召，今年的春节很多人选择就地过年。如何让大家过一个充实的好年，中国电信陆续在全国各省天翼高清..上线“VR全景专区”，让宅家看世界成为可能。

其中，有这样一场VR直播，格外引人注目。那就是河南嵩山少林寺的8K+沉浸式低延迟VR直播，360度无死角呈现少林的千年风貌。在这场感官盛宴背后，离不开中国电信丰富的云网资源，更离不开中国电信天翼云与英特尔等合作伙伴的协同创新！

伴随着5G的规模商用，5G三千兆能给我们带来什么，是包括运营商在内的所有产业链企业共同探讨的话题。8K、VR作为5G大带宽场景下的“杀手级”应用，备受关注。

对于中国电信而言，正在全力推进5G、千兆光宽网络的建设，如何充分释放5G云网价值，为用户带来更好的体验，赢得激烈的市场竞争，是必须要考虑的问题。

对于登封嵩山少林而言，受新冠疫情影响，景区收入同比下降，需要找到全新的突破口来增收，以及宣传、展现少林千年古刹和中华武术精神。

对于用户而言，体验是没有止境的。通过8K+VR，用户不只可以在景区游览时获得乾坤大挪移式的新视角，还可以让距离较远、受疫情影响不便出行的用户，在家中即可有身临其境的体验。只需要接入中国电信宽带或5G网络，便可人在家中座，沉浸式体验景区实况。

可以说，8K+VR直播不仅是全新的感官体验，更是运营商5G三千兆商业模式的积极探索和有益创新。但创新，注定是条艰难的旅程。

与传统视频应用相比，VR的最大特点即沉浸式体验，360度全景、8K超高清、3D、强交互等沉浸式体验的技术，对网络能力、计算能力提出了更高的要求。

以8K超高清为例，8K HEVC 30FPS视频流码率达到100Mbps。如此高的网络传输带宽即使对于5G网络，也是不小的压力。如果考虑到帧率进一步的提高，到达8K 60FPS；或者8K Stereo 360全景视频，对于网络带宽的需求还会成倍地增长。

不止是传输带宽，如何对动辄上百兆的视频流码进行视频编解码，也是个巨大的挑战。根据360全景视频特点，特定时刻的用户视角通常只占据全部图像中一小部分区域，如果对全景图像进行8K的传输和解码，会造成了极大的网络和计算资源的浪费；同时，要求服务器/边缘算力..具备强大算力和可扩展性，支撑实时转码需求，最大程度降低端到端时延。

从用户层面来看，目前主流的VR设备还不具备8K视频解码能力，开源的FOV渲染VR播放器也不具备终端的通用使用能力。如何让“旧时王谢堂前燕，飞入寻常百姓家”，也是中国电信天翼云研发团队必须要考虑的问题。

在项目中，中国电信天翼云联合英特尔，协助中国电信郑州分公司在嵩山少林寺架设两台8K VR相机，将百兆码率的景区360度全景视频通过RTMP协议经5G信号或千兆宽带传输到郑州5G核心机房或登封市的边缘节点，在5G核心机房做转码处理。在全景视频编码中，对原始图像的切分编码使用HEVC MCTS（Motion-Constrained Tile Set）来实现。

据悉，该VR视频直播系统构建于英特尔的OVC（open visual cloud） WebRTC 360Video Sample和SVT（Scalable video technology，可扩展视频技术)开源架构之上，依托英特尔第二代至强处理器提供8K HEVC的实时转码能力，端到端延迟可以做到2秒，转头延迟相比开源方案大大降低。

为了解决传统FOV传输方案必然引入的视角切换延迟问题，中国电信天翼云研发团队创新性的提出了全传输架构下的FOV渲染解决方案。与传统FOV方法的根本不同在于，全传输架构下的FOV渲染，所有的视频数据都传送到本地，当客户端旋转视角时，可以自动选择对应的视角部分的数据进行渲染，这就大大缓解转头延迟带来的眩晕感，提供更好的体验。

为了降低用户使用门槛，支持移动端VR视频FOV渲染播放，中国电信天翼云研发团队成功地将开源的VR 播放器实现移植到手机移动端和VR一体机上。中国电信天翼云拥抱开源，也在回馈开源，并计划开源CTYun VR SDK。

体验无止境！在终端超分辨率视频呈现方面，中国电信天翼云使用超分辨率算法对解码后的视频图像进行了进一步的增强和渲染，使用户的视觉体验更为平滑和自然。除此之外，中国电信天翼云后续还将部署基于边缘计算的实时拼接方案，基于云端的画质增强智能转码进一步提升画质，为用户提供身临其境的沉浸式体验。

伴随5G商用的融合发展，VR技术正成为推动行业应用、消费普及、创新合作的重点方向。正如中国电信董事长柯瑞文在2020世界VR产业大会云峰会上指出，5G、物联网、云计算为代表的新型基础设施是虚拟现实产业发展的重要支撑。中国电信加快推进“云改数转”转型升级战略，助力VR产业的发展和普及。

或许在不久的将来，《头号玩家》中的场景将一一实现。在这个过程中，不仅需要更多的产业合作和应用案例，更需要直击痛点的技术创新和商业模式探索。而这，正是中国电信天翼云和英特尔携手同行的“初心”！