当前位置: 首页 > 科技赋能

两会记者热捧的全景视频为何这么模糊?

时间:2024-05-22 20:09:06 科技赋能

这几天,VR群里挺热闹的。

时不时就有朋友出来刷屏说两会记者用全角度全景相机进行新闻报道,有的甚至开始说教。

“两届首次使用VR技术,迎来国产VR元年。

”虽然大部分都是2D全景伪VR视频,但记者们还是很感兴趣。

网上查找,使用全景视频报道两场会议的媒体有五家,分别是新华网、法制晚报、经济日报、光明网、中国新闻网(不排除遗漏)。

这些视频主要通过三个渠道传播。

一是通过优酷、乐视APP、爱奇艺、得图、UtoVR等视频平台,二是通过自有媒体平台,三是通过H5页面。

据相关报道,上述两场记者主要使用了两种全景视频拍摄方案。

第一个是Insta、Perfect Vision Eyesir等双摄一体相机,第二个是结合GoPro的多摄像头解决方案。

值得一提的是,这些全景拍摄方案的拼接技术来自于方案本身。

例如,Insta通过手机APP实现拼接上传,Eyesir通过硬件实现实时拼接,新华社则采用乐瑞特七眼全景相机提供的拼接技术。

基本上是一个“傻瓜式”操作来实现全景拼接。

这些关于两次会议的全景视频都有一个共同的特点。

用户可以通过鼠标、手机滑动或传感器改变视角来查看基于全景相机的全景图片。

与传统的展示方式相比,这种全景图确实引人注目。

正如网上所言,“两场的全景展示,让读者从被动接受新闻场景的展示转变为主动选择,有一种身临其境的代入感。

这让我这个不是国家代表的人人大,沉迷官场~”不过,记者也发现了一个更严重的问题:视频质量普遍较差。

即使通过优酷会员选择最高P,观看效果也不好。

事实上,两场会议所使用的全景相机解决方案都可以支持4K视频输出。

为什么图像质量普遍较差?本文暂时忽略硬件难以统一讨论的原因,仅讨论基于视觉效果的因素。

不少人士告诉记者,造成全景视频模糊的主要原因是优酷等平台的播放器和带宽水平。

对于带宽问题,Insta CEO刘靖康这样解释:“全景视频P不够,会很模糊。

用4K会更清晰,但目前大多数网站的带宽水平不足以分发4K视频。

”目前,一般(客户端)视频网站只能承受2~3M,如果再大的话,他们将无法承担费用,用户可能无法观看。

但比较好的全景视频,码率至少6M以上,一般4K在10M以上。

“除了看似难以解决的带宽问题外,不少团队还向记者抱怨,优酷等平台的播放器没有优化,导致对全景视频的支持不足。

也有人表示,相同的播放器之间的差异视频在YouTube和优酷上的占比很大,对此有两种看法,一种是来自得图CTO孙启锐的观点:这是由于优酷的视频压缩、传输和运营成本策略造成的。

一位业内人士表示,“目前,优酷在CPU上进行计算,当视频解码时,将图像发送到CPU,然后CPU将纹理发送回GPU。

” CPU和GPU之间传输是一个效率问题,图像会先压缩然后再传输,但是最好的方法是解码视频直接扔给GPU,如果是CPU,x就很卡。

大多数计算机,边长只能是2的指数,所以它会先将x压缩为x,远远落后。

但如果直接在GPU中运算,边长2的指数就没有限制了。

”尽管如此,记者还是觉得以上两个原因还不足以说明问题。

当记者浏览视频时,也会出现像上图这样的情况:拼接紊乱出现局部模糊,影响画面,对此,计算机视觉解决方案提供商Evolutionary Dynamics表示:“通常这种情况是由后期制作所使用的拼接软件造成的,而不是。

图像信号失真造成的模糊主要是因为在标准特征拼接算法过程中,图像会经过多次高斯模糊卷积从中选择高频信号,从而消除拼接缝处的重影现象。

由于相机相对位置的外参估计不准确,导致图像拼接模糊。

”事实上,拼接处理不好最终会影响最终的画面效果。

具体来说,拼接包括外参标定、内参标定、色彩校正、去模糊、最终优化五个过程。

“每个过程的参数有很多选择,方法也有很多”,这些参数都会影响最终的效果。

关于记者提出的另一个问题:广角镜头的畸变对画质的影响。

Evolutionary Dynamics表示,两颗镜头的全景相机的畸变是没有办法解决的,因为由于鱼眼镜头的光学特性,通常会出现比较严重的图像信号畸变以及镜头边缘的畸变。

然而,还有另一种可能性,即使用OpenGL或其他引擎将全景图投影到球面上时显示。

制作视频时,存在参数选择的问题。

“虽然可以通过显示投影时修改投影参数来修复边缘的畸变问题,但丢失的图像信号无法恢复,所以仍然会模糊。

”对方表示。

由此我们可以得出结论,播放器和带宽水平是目前全景视频模糊的主要原因。

同时,造成这种效应的原因还有很多。

这不仅仅是上面讨论的拼接和失真,也是硬件瓶颈。

例如,大多数用灯光拍摄的图像都会有光晕效果;也存在操作不当的情况。

例如,曝光不均匀导致拼接的天空出现“一白一蓝”。

不过这些问题最终都会得到解决,之后就不仅仅是清晰的2D全景,而是三维全景+更多的交互模式。