当前位置: 首页 > 科技赋能

NVIDIA张建中! VR技术的下一个突破点是什么?

时间:2024-05-22 16:35:23 科技赋能

以下内容根据英伟达全球副总裁兼中国区总经理张建中、青通视觉联合创始人祖厚超在《VR的未来》闭门论坛上的演讲整理在极客奇点创新者峰会上 我认为很多人都认为VR是一项非常新的技术,大家都认为2020年是VR元年,事实上我认为VR技术被认为太新了。

事实上,VR是一项非常古老的技术,60年前就已经有人尝试过,在我们许多人出生之前,它需要一个大型设备来让人们进入、感受或模拟它,所以VR本身并不是一个。

新技术而是一种旧技术,但在这个过程中很多科研人员花费了大量的时间来改进VR技术。

事实上,每隔10年或20年,VR技术就会发生不同的变化,在这些变化中,我们看到在2000年左右,有些人把VR戴在头上,然后走动,这和我们现在的形式很相似。

大家都认为2009年,VR元年,第一代头盔开始出现。

当大家体验后,都感到震惊,感觉VR技术实现了一个大的飞跃。

如果与历史相比,2019年的头盔为何能够给消费者带来第一眼的震撼效果,而不是像60年前的VR那样只能由实验室专家模拟?这是因为我们在 2018 年发布了新的 GPU。

我们计划在下一代产品中将其整体性能提高三倍。

在不断的变化中,VR才能真正进入消费和实用阶段。

GPU的性能在计算能力上需要大幅提升才能满足我们用户的需求。

10年前我们可能还没有GPU,GPU的时间也很短。

这几年发展很快,带来了整个算力的提升。

我们今天拥有最好的 VR 头盔。

当你看它的时候,你会发现很多VR体验。

都是不满意,感觉分辨率不够高。

当我们每部手机都有视网膜屏幕的时候,当你看不到你看到的点的时候,精度就能够满足我们用户的需求了。

今天当你戴上头盔时,你会发现每张图片的像素都非常粗。

直到有一天,像素非常精细,你的眼睛不必对图像质量挑剔,那么 VR 的质量将与今天有很大不同。

VR世界中有很多应用,我们在开发过程中需要大量的真实模拟。

你必须有很好的方法来模拟现实世界,你必须有工具来帮助我们开发者开发出更好的内容。

大家都知道,人类与机器交互最简单的方式就是人类自己。

你会看到,在用户体验方面,很多公司会开发更好、更新的人机交互技术。

今天,我们看到许多合作伙伴在不同阶段开发了许多有趣的设备。

这些不同的设备是在几个月内开发出来的。

它会迭代得非常快。

我知道很多公司开发的人机交互在多人交互VR交互方面已经非常成熟,最好的方式仍然是人机友好的交互方式。

好的内容技术的应用不会成熟。

内容带动技术发展,技术发展也带动内容进步。

在VR系统中,内容开发者是核心关键。

VR引擎和内容非常重要。

这几点结合起来,可以让整个VR行业从传统走向一个新的阶段,整个内容可以有很大的提升,但这些提升需要强大的GPU性能来驱动。

去年的产品已经是世界上最快的了,但也只能达到60帧。

当我们放大到左右两只眼睛进行渲染时,假设分辨率是困难的。

这是我们今年推出的产品。

这也是所有网站和销售中销量最好的显卡,GTX。

只有它才能满足HTC Vive。

我们将显卡的渲染能力提高了 7 倍。

除了提高整体 GPU 性能之外,我们还添加了 VRWorks 套件中的许多技术。

在此我们添加了一个新的渲染引擎。

GPU在渲染的时候,不仅渲染眼睛看到的部分,还渲染左右方向的全部。

当您的头部左右移动时不需要它。

是时候重新做工作了。

如果GPU一次性渲染出1度的图像,那么当耳机移动时就不需要再次计算。

这种方法可以渲染整个可见表面或在你的眼睛可以看到的视角范围内的整个图片。

当GPU算力不够时,这种方法可以取得非常好的性能。

当你左右移动头部时,不需要再次渲染。

我们将眼睛看到的图像折射到你眼球的曲面上。

这样一来,GPU的图形图像渲染能力就提升了7倍。

这个好处可以减少所有计算中的大量计算。

你会看到显卡中VR的性能比GTX高7倍。

允许 HTC Vive 达到帧数。

我们都知道VR世界不仅仅是用眼睛看,所以我们需要看到你的视觉、听觉、触觉等各个方面模拟自然世界中的各种效果。

我们利用人类的面部特征、眼睛、耳朵、手和皮肤来添加这些感觉,并创建一个 VRWorks 套件来真正模拟现实中的一切,包括物体之间、物体之间的碰撞。

轨迹都可以基于重力加速度来模拟。

同时我们也做了一些非常好的开发工具。

这些开发工具包括很多物理模拟SDK,包括PHYSX,它可以分裂成小颗粒来模拟很多分子运动,也可以模拟很多流体。

许多建筑的精雕细琢,细到每一个微小的部分,都赋予了它真实的效果。

你可以看到许多战争场面和破碎的物体。

如何体现这一点呢?为了让更多的开发者学习使用这些新的SDK,我们制作了一款名为FUNHOUSE的游戏。

我们建议大家欣赏并体验FUNHOUSE的效果。

我们计划在线开放源代码,以便所有开发者自行下载。

我们还计划与国内游戏开发社区合作,为大家提供相应的技术支持,教会每一位开发者开发出更加真实、自然的游戏效果的能力。

这有什么效果呢?建议大家找一个设备来体验一下。

这个模型非常简单。

简单的物理效果模拟游乐场。

所有运动轨迹都是相同的。

如果篮球能够产生重力加速度,反弹和碰撞的结果就会非常真实。

气球破裂后粒子的状态。

游戏开发得好的话,可以开发得很精细。

如果开发得很精细的话,对于我们GPU来说就会很麻烦。

你很快就会杀了我们。

有些人可能会买4块钱,这也有助于我们尽快开发下一代GPU。

事实上,许多游戏玩家认为这款显卡速度太慢,这也是近年来GPU发展加速的原因。

为了做好这些事情,AUDIO非常重要。

要想做好这件事,这个也很简单,就是声音的折射和反射。

对于GPU来说这非常容易,因为GPU中有一个专门用于光线追踪的引擎。

,如果更容易进入声音,没有那么多声源,但会有很多光源,我们会把这个算法添加到VRWorks套件中。

当然,我们都会迫切希望Volta尽快问世,好消息是很快就会出现,坏消息是还需要两年时间。

如果我们是今年的投资者,你会发现投资的两大技术是AI和VR,它们都是基于GPU的。

如果一家公司不懂GPU研发,你去投资它就有点浪费了,因为它很难找到驱动他的应用的技术源头。

综上所述,在VR方面,我相信对于我们整个生态系统,无论是HMD、引擎还是游戏乐园,如果你有任何技术上的帮助,你都可以来找我们NVIDIA。

我们也愿意与所有同行、所有生态系统合作。

合作伙伴将共同努力,将VR推向新的高度。

这是一个非常好的观点。

全球投资和全球发展有着相同的起点。

没有优先顺序。

中国绝对有机会超越世界其他国家。