5G中的VR/AR:新发展机遇

        2018年12月21日,工信部发布《加快推进虚拟现实产业发展的指导意见》,从关键核心技术、产品有效供给、重点行业应用、公共服务平台、标准规范体系和安全保障能力等几方面作出了规划指导,催生AR/VR在游戏动漫、影视、文旅等行业的快速发展。AR/VR与4K/8K超高清共同构成了下一代大视频产业。

        虚拟现实(VR)通过模拟环境感知用户的状态和行为,替换或者加强感知系统的感官反馈信息,从而使用户获得沉浸在模拟环境虚拟环境中的感觉。

        虚拟现实技术的特点是沉浸性高, 当用户处于虚拟环境时,如身临其境。用户转变角度时, 虚拟环境也会做出相应的改变。

        VR主要分为两种业务。一种为360°全景视频类,如UGC(用户产生内容)的360°视频直播,PGC(专业内容生成)的360°赛事、音乐会、电影等,此类业务通过多个摄像头采集、拼接手段,把平面的视频还原为全景,以流媒体形式在头显播放。

        另一种以计算机图形(CG)处理为关键技术,利用计算机生成模拟环境,是一种多源信息融合的、交互式的三维动态视景和实体行为的系统仿真使用户沉浸到该环境中,也可叫CG类VR,主要应用于如虚拟教学、社交、游戏、资产销售等场景。

        现阶段的VR直播主要是指360°全景直播,利用多路摄像机将视频信号拼接为360°全景视频,解决传统直播受众受镜头推移、视线角度的限制不能获得最佳视觉体验的问题。用户可以通过机顶盒(STB)、VR眼镜等设备进行观看直播,体验沉浸感和现场感。

        VR直播通过全景摄像机进行视频的实时采集,并对视频进行拼接、编码,通过内容分发网络进行传输,最终在终端上进行视频的解码播放。其中用到了多项视频处理的技术,和普通直播视频的要求有着很大不同。

        AR影像增强现实(AR,Augment Reality)是人工智能和人机交互的交叉的学科,是实时地计算摄影机影响的位置及角度并加上相应图像、视频、3D模型的技术,是一种把真实世界和虚拟世界信息有机集成的技术,AR把原本在现实世界一定时空范围内很难体验到的实体信息(主要包括视觉和听觉信息)通过计算机模拟仿真后再叠加,将虚拟的信息应用到真实世界,被人类感官所感知,从而达到超越现实的感官体验。

        相对VR来说,AR更强调的是在真实场景下增加的信息,观看屏幕与VR的全封闭头盔设备不同,主要有头戴透明现实、手机、手持投影等。目前应用主要领域是工业、商业以及游戏类,如AR导航。

        AR/VR应用作为垂直行业的核心应用,沉浸式、互动式的交互体验使AR/VR应用在5G网络建设初期就已经得到广泛的宣传推广。

        AR/VR是近眼现实、感知交互、渲染处理、网络传输和内容制作等新一代信息技术相互融合的产物,新形势下高质量AR/VR业务对带宽、时延要求逐渐提升,速率从25Mbps逐步提高到3.5Gbps,时延从30ms降低到5ms以下。

        AR/VR应用在实现流程上主要分为4部分,即内容制作、内容上传、云平渲染、用户体验。早期的AR/VR体验主要以本地片源和有线传输为主,本地化片源受限于内容无法实时更新,使得AR/VR无法得到长足的发展,5G网络在AR/VR上应用,不仅满足内容实时获取,无线传输也将地域限制被打破。

        随着5G技术的发展,5G网络的全面商用推进,在5G时代视频业务有望迎来全新的发展机遇。以VR全景视频业务为代表的新媒体形式构成未来“5G+VR视频”业务核心。

        4G时代,VR技术就已出现,但VR却迟迟未像平板电脑、智能手机等移动终端一样快速霸占企业和消费者市场,这与VR整个产业生态面临的多个痛点相关。

        一方面,VR对硬件产品要求较高,需要高分辨率、高刷新率的显示屏、性能优异的显卡等器件作为支撑。高端的硬件产品能够确保良好的体验,但较高的价格也使众多消费者望而却步。

        另一方面,VR内容生产者较少,制作成本较高,又由于缺少足够的用户群体,难以为生产者带来收益。最重要的是,网络传输速度和带宽满足不了VR技术需求是限制发展的主要原因。

        在4G条件下,带宽的限制导致数据传输不够快,捕捉到的数据来不及处理和显示,人的动作连贯性得不到有效改善,设备显示画面会卡顿,清晰度也难以达到令人沉浸的效果。

        5G技术让智能的万物能够互联,实现了大规模机器间的相互通信,与VR/AR/MR多种模式进行融合,带来不同领域的新体验,比如VR直播、VR/AR电竞、AR医疗以及更多的混合MR类型。

        5G时代的到来,对VR产业生态最直接的影响体现在技术层面,超大带宽、超低时延、超高速率等特点,能够有效解决VR在技术方面遇到的瓶颈。

        随着各个垂直行业相继探索AR/VR应用在各自领域中的作用,目前已在多个领域得到了积极的成效,而这种沉浸式、互动式的交互体验使AR/VR应用在5G网络建设的初期就已经得到广泛的宣传推广,也成为人们最期待的5G应用之一。

        5G解锁VR新业务场景。在以往的直播过程中,用户观看的都是平面影像,摄像机的机位只能固定或者进行小范围的移动,而5G+VR技术在直播中的应用则彻底改变了用户的观看方式,360°的观看体验使用户的沉浸感得到了质的改变。

        5G与百兆以上的光纤均能满足4K/8K超高清视频的传输需求,相对于4G而言,5G与有线宽带的时延更小,基本能满足网络VR 20ms时延的要求。

        5G能在AR/VR视频传输的中心环节发挥作用。AR/VR视频内容制作以后可以通过互联网或者5G无线网络上传至云平台,利用云平台强大的数据处理能力和计算能力对视频内容进行渲染,用户终端通过5G网络实时获取AR/VR资源。

        AR/VR业务因全景视频的分辨率、自由度、响应时延等因素在带宽和时延两个方面同时对网络性能提出了要求,360全景高清视频的信息量相当于4倍高清视频,传输码率可从数十Mbps至Gbps。

        特别是VR的沉浸感对实时性提出了特别的要求,动态响应时间要求达到毫秒级,因此现有的VR应用大多局限于本地服务器渲染,应用场景受限,用户体验较差。

        5G特有的MEC边缘计算技术是保证低时延的关键,可从根本上突破VR/AR本地化,实现VR/AR云化服务,在大型综艺、体育赛事等节目中为用户提供实时的互动体验,增强VR的真实沉浸感。

        未来还可通过边缘计算平台可将电信网络的能力信息抽象成各种服务,开放给VR/AR第三方和垂直行业应用,为VR/AR的普适化服务奠定良好的基础。

        随着云VR技术的发展,轻量级头显设备有望得到快速发展和普及,VR技术的移动性需求随即增加,对5G技术的需求也会不断提高。

        目前,VR已经广泛应用在房地产、会展、游戏娱乐等行业,5G到来后,VR有望解锁更多业务场景。VR在传媒领域的应用也会被进一步发掘,主要业务场景包括直播、新闻、影视、营销、社交等,随着5G商用的到来,VR产业正在进入高速发展阶段,有望成为引领全球新一轮产业变革的重要力量。

        无论是VR、AR还是其他新媒体技术,5G时代带来最显著的改变是视听形态媒体的极大改善与提升,让用户通过智能技术获得身临其境的观感和体验。