说起虚拟现实(VR),笔者曾经体验过HTC VIVE。
经过十分钟的适应后,我可以愉快地玩了,但有一个问题限制了游戏体验。
——烦人的连接,沉重的头盔拖着又长又重的电缆,严重影响行动。
作者连蹲下射击都懒得做,更别说跑跳和紧急闪避了。
这给FPS玩家带来了困难。
熟悉的僵尸射击游戏变成了僵尸塔防。
“如果能有无线 VR 那就太好了。
”这是我体验VIVE后的感想,也是移动领域与VR结合的价值所在。
高通骁龙处理器拥有让VR进军移动领域的绝活。
玩移动VR,骁龙有先天优势。
Adreno GPU、Hexagon DSP和Kryo?? CPU在高通Snapdragon处理器中构成了新的异构计算“铁三角”。
基于此,高通加入了Qualcomm Symphony System Manager,以协调三者之间的分工。
。
这意味着当正确的处理器处理相应的任务,或者正确的处理器通过适当的组合处理相应的任务时,甚至可以实现更高的系统性能并且可以节省更多的功率。
最重要的是,不需要安装专门的软件来实现这个功能,一切都可以依靠底层硬件自动完成。
这里我们不妨称骁龙为“异构计算乐团”,而虚拟现实沉浸式体验正是这个乐团的高明之处。
过去,很多人争论手机是否有必要采用2K分辨率。
然而,到了VR时代,眼睛与屏幕的距离已经从几米、几十厘米缩短到只有近视眼镜的距离。
当眼睛距离屏幕只有1到2厘米的时候,且不说是否需要2K分辨率,4K显示就变得至关重要。
为了保证运动画面流畅,电视机上常采用专用集成电路进行MEMC(运动补偿),以提高画面帧率和刷新率。
在Snapdragon上,只有依靠Adreno GPU的高性能才能实现4K的高帧率插播,保证画面流畅。
此外,VR体验中还采用了Adreno VPU和DPU带来的图像增强技术。
通过降噪、分辨率插值、HDR处理等算法提升图像质量,让消费者不再害怕用高倍放大镜观察图像。
(左图为没有4K显示的VR体验,Pixel Battle)(运动显示也是VR体验中的一个问题,相信没有人愿意看左边的画面))(Adreno VPU和DPU进行HDR处理和还原关于面对面的Noise)玩过相机的人都知道,变形、扭曲(扭曲)和色散是大敌,在VR中更加突出,因为VR需要3D环视,至少是拼接左眼和右眼的两个图像。
畸变越大,畸变越大。
,而色散会极大地影响清晰度。
Snapdragon处理器的畸变校正功能和色散补偿(由Adreno GPU实现)的双重优化可以提高移动VR的图像质量。
光有漂亮的图像是不够的,VR体验需要保持感官同步,这正是骁龙异构计算管弦乐队所展示的。
Qualcomm 沉浸式音频技术可提供完全清晰、身临其境的声音,而带有 Hexagon 矢量扩展 (HVX) 的 Qualcomm Hexagon 数字信号处理器 (DSP) 使用传感器处理和 Adreno GPU 进行虚拟渲染。
声音效果、图像传输和传感器必须协同工作,才能让用户感觉自己正在虚拟现实世界中环顾四周。
此外,移动VR对于无线数据传输也是严峻的考验。
与简单的4K视频相比,移动VR需要传输高度的视觉信息,这对网络带宽提出了非常高的要求。
过去,玩网络游戏时,延迟(ping)是游戏体验的核心。
体验VR/AR应用时的不适感主要是延迟造成的。
可靠的高速数据传输才是真理。
想想 VIVE 的紧密联系。
不就是为了可靠、高速、低延迟的数据传输吗?这正是 Snapdragon 处理器所擅长的。
与竞争对手仅在旗舰移动处理器中实现.11ac标准WiFi且不支持MU-MIMO技术相比,高通从Snapdragon开始就支持.11ad标准WiFi。
过去,WiFi运行在2.4GHz和5GHz频段,但.11ad使用高频载波的60GHz频段。
除了带来7Gbps的高带宽满足VR巨大的传输带宽需求外,还可以有效降低延迟。
Snapdragon 使用.11ad 传输 VR 内容时,延迟仅为 20 毫秒,甚至缩短至 10 毫秒。
这意味着当用户携带支持Snapdragon的头戴式VR设备或手机等独立设备时,可以享受类似于有线HTC VIVE的VR体验。
使用 Snapdragon 黑科技实现 VR 技术的最大挑战之一(规格表上并未列出)是减少输入动作(头部旋转)和屏幕更新显示(刷新屏幕发出的光)之间的时间,即即运动到光子 (MTP) 延迟。
简单来说,传统VR体验时的头晕感比在晃动的公交车上看手机要严重得多。
当你的头转动或者只是四处走动时,你可能会感到头晕。
因此,降低设备的MTP延迟是用户移动时保持虚拟世界稳定的关键。
研究表明,虚拟现实中良好的用户体验需要大约 20 毫秒或更短的 MTP 延迟。
刷新显示之前需要很多处理步骤:传感器与各种惯性和视觉传感器融合、视图生成、渲染/解码和图像校正以进行采样,最后刷新显示,考虑到 60hz 显示设备本身有 17 毫秒的时间,因为由于延迟,这些操作必须高速完成。
Snapdragon就是能够满足这一要求的SoC。
其异构计算设计可以实现点对点连接,减少单个任务的处理延迟,并并行化尽可能多的任务以最小化MTP延迟,让软件、传感器和显示器能够和谐地协同工作,它们具有独特的定位支持卓越的移动 VR 体验。
此外,高通已经实现了传感器接口的统一和管理,有利于数据快速反馈到SoC的各个子处理器。
Snapdragon VR SDK 已经上路。
Google Daydream平台虚拟现实平台的一个关键部分是软件和工具。
Qualcomm Technologies 宣布推出基于 Snapdragon 的 Snapdragon VR SDK。
一项至关重要的新技术,可带来更好的 VR 用户体验。
它们包括:DSP 传感器融合、快速光子移动、带镜头校正的立体渲染、VR 层和电源管理。
其中,DSP传感器融合利用了Snapdragon包含的全套技术。
该SDK允许开发人员通过Snapdragon传感器核心轻松获取高频陀螺仪和加速度计的传感数据,并使用Hexagon DSP进行预测性头部位置处理,以更高的响应速度打造沉浸式体验。
Fast Photon Movement 旨在通过异步时间扭曲和单显示器缓存提供快速 3D 图像渲染来减少 MTP 延迟,最多可减少 50% 的延迟。
开发套件的诞生意味着移动VR开发者无需考虑更复杂的技术问题,专注于内容有利于整个行业的发展。
谷歌在 Google I/O 大会上宣布了 Daydream 虚拟现实平台。
这是一个基于Android N构建的高性能移动虚拟现实平台,它很可能成为世界上最大的虚拟现实平台。
Daydream智能手机将搭载Snapdragon Dragon处理器。
Snapdragon VR SDK是Daydream的补充,让OEM厂商能够利用Snapdragon异构计算和传感器引擎一流的VR体验能力,进一步优化VR体验。
结论 移动 VR 已经上路。
高通和谷歌为开发商和制造商准备了软件和硬件。
我相信,下一个移动VR体验将不仅仅出现在产品发布会上,而将出现在消费者中间。
而且,它也不会是一款简单粗暴的手机壳VR盒子产品。