VR是多媒体技术发展的必然趋势,人们所使用的信息载体从最早的文字、图像,到音视频,再到用VR,将事物的描述表达推向了极致,充分满足了沉浸性、互动性和构想性三大要素的需求。随着5G的商业化运营,VR有望突破传输、处理、实时性等相关的技术瓶颈,VR直播将迎来新的发展机遇,应用场景将极大拓展。 接下来,我们会从京东云VR直播的关键技术点进行切入,带大家一起来了解一下VR直播在5G时代的落地应用是怎样实现的。
搭建直播平台实现VR直播的关键技术
产品架构
京东云VR直播产品架构图
VR直播由VR采集/拼接/推流、云端VR处理、VR播放三端组成。
采集端采用VR拍摄设备,捕捉全景画面,传输到京东云;京东云VR直播平台进行实时转码、录制和分发,并对直播内容进行审核和鉴权等;用户佩戴VR头显进行实时直播观看及点播回看,享受沉浸式的观看体验。
关键技术
1 视频实时拼接和空间重定位
VR直播信号在采集的过程中是通过多机位、多角度拍摄的,所以在采集后需要对多个镜头的视频进行实时拼接,拼接通过时间坐标和空间坐标对视频进行缝合处理,同时进行畸变校正。完成拼接后,将正方向调整为影片想要表现的主体,从而为客户提供高质量的VR直播服务。
2 ROI编码
感兴趣区域(ROI)变质量编码,通过设定的感兴趣区域(通常为人脸),在网络带宽或存储空间有限的情况下,提供既符合人眼观看画质要求,又满足网络传输或空间存储的的高质量视频编码。
3 京享超清转码
通过京东云特有的视频编码能力和优化算法,对视频中的内容、场景、画面进行智能分析和处理,让视频拥有高画质的同时,可以降低视频码率,有效的为客户节约使用带宽和成本。
4 全景LOGO/水印
可在不改变VR视频时,播控嵌入LOGO/水印,可支持静态、动态、单个、多个LOGO/水印,为VR视频提供版权声明保护。
5 VR视频质量检测
支持黑场、纯色、偏色、静帧、亮度、对比度等多种形式的VR视频质量检测,提高审核效率,降低审核成本。
6 其他
京东云VR直播还用到了很多其他关键技术,可为客户带来丰富的VR直播体验,如支持延时直播、直播截图、时移回看、内容安全保护、直播流调度等。
5G+VR直播应用场景
结合5G提供的强大数据传输能力和京东云海量数据存储和边界处理能力,VR直播可为客户提供从采集、拼接、处理、压缩、分发到播放的一站式产品化服务,可广泛应用于VR在线旅游、VR购物、VR家装、VR医疗、VR事件直播等业务场景。