vr直播

实现VR直播的关键技术

天涯浪子 提交于 2020-02-27 23:04:07
VR是多媒体技术发展的必然趋势,人们所使用的信息载体从最早的文字、图像,到音视频,再到用VR,将事物的描述表达推向了极致,充分满足了沉浸性、互动性和构想性三大要素的需求。随着5G的商业化运营,VR有望突破传输、处理、实时性等相关的技术瓶颈,VR直播将迎来新的发展机遇,应用场景将极大拓展。 接下来,我们会从京东云VR直播的关键技术点进行切入,带大家一起来了解一下VR直播在5G时代的落地应用是怎样实现的。 产品架构 京东云VR直播产品架构图 VR直播由VR采集/拼接/推流、云端VR处理、VR播放三端组成。 采集端采用VR拍摄设备,捕捉全景画面,传输到京东云;京东云VR直播平台进行实时转码、录制和分发,并对直播内容进行审核和鉴权等;用户佩戴VR头显进行实时直播观看及点播回看,享受沉浸式的观看体验。 关键技术 1 视频实时拼接和空间重定位 VR直播信号在采集的过程中是通过多机位、多角度拍摄的,所以在采集后需要对多个镜头的视频进行实时拼接,拼接通过时间坐标和空间坐标对视频进行缝合处理,同时进行畸变校正。完成拼接后,将正方向调整为影片想要表现的主体,从而为客户提供高质量的VR直播服务。 2 ROI编码 感兴趣区域(ROI)变质量编码,通过设定的感兴趣区域(通常为人脸),在网络带宽或存储空间有限的情况下,提供既符合人眼观看画质要求,又满足网络传输或空间存储的的高质量视频编码。 3 京享超清转码

虚拟现实,增强现实,VR,AR

百般思念 提交于 2020-01-10 03:32:54
现在的热点不止VR,还有AR和披着MR、HR、CR外衣的各种高级AR们,所以比较着一起说。 以下知乎上一网友观点,放几条结论: 1 、近期(未来两三年)看,VR能火,AR尚待成熟; 2、VR设备中,插片式是过度产品,一体机将是主流; 3、中长期(未来五到十年)看,VR是过度产品,AR终成主流; 4、AR成熟前,VR的主要意义是在立体内容、新型交互上打基础,并通过市场拉动技术提升。 5、内容上,3D立体表现重于2D全景表现;立体表现中,空间层次的立体重于内容本身的立体。 下面一条条展开说,最后是我们可以做的: 1 、近期(未来两三年)看,VR能火,AR尚待成熟; 这第一条是大家共识,AR对计算能力的要求比VR高出一个数量级,并且所需的光纤投影技术、眼球追踪技术、图像识别技术、实时三维建模技术等等都尚不成熟,而VR,却将在2016年开始爆发: 一是迎来VR技术开关的打开(包括屏幕刷新率90Hz以上、屏幕分辨率2-4k,延迟降至19.3ms内、计算能力性能提升且cpu体积缩小); 二是迎来内容上丰富,大厂的精品游戏,VR直播,VR秀场甚至VR电影; 三是体验较好的消费产品如oculus、gear、vive即将上市; 四是伟大的Google福音将至,推出免费开发版VR系统。 2 、VR设备中,插片式是过度产品,一体机将是主流; 这条也有不少共识,原因先拣三条说: 一是屏幕分辨率