视觉世界由许多包含多种数据类型、接口和人工智能模型的移动部分组成。3D界面包含许多具有时间和空间相关属性的数据类型,这对于捕获和分析过去的趋势以及预测未来趋势很重要。这种视觉模拟技术现在正在一些重要的项目中使用,比如DeepMind的AlphaFoldAI研究项目,可以预测超过2亿种已知蛋白质的3D结构。蛋白质折叠是药物发现的基础,AlphaFold正在医学研究中用于治疗COVID-19。在高性能计算领域,元界为研究人员进行虚拟仿真协作提供了条件。作为Metaverse的最大支持者之一,Nvidia正在通过一款名为Omniverse的产品来宣传这一概念,该产品包括一套人工智能、软件和用于研究和科学建模的视觉技术。Nvidia一直对其Omniverse产品的功能含糊其辞,但最近透露了一些信息。该平台使用一套复杂的技术来收集、组织、翻译和关联最终收集到数据集中的数据。人工智能模型将分析这些数据集,然后为科学应用提供可视化模型,例如,其中可能包括用于了解行星趋势或开发药物的模型。在该平台的最新合作用例中,NOAA将使用Omniverse和LockheedMartin的技术可视化气候和天气趋势数据,然后研究人员可以使用这些数据进行预测和其他研究。由洛克希德马丁公司开发的OR3D平台收集的信息对于可视化天气和气候数据非常重要,其中包括来自卫星、海洋、以前的大气趋势和传感器的数据。此数据特定于OR3D文件格式,并将内置到一个“连接器”中,根据通用场景描述(USD)格式将数据转换为文件类型。USD文件格式具有可以将定位、方向、颜色、材料和图层等数据组合到单个3D文件中的运算符。转换为USD文件格式很重要,因为它使可视化文件可共享,允许多个用户协作,这是虚拟世界的一个重要考虑因素。USD文件也是一个转换器,可将OR3D文件中的不同类型数据分解为人工智能模型的原始输入。数据类型可以包括3D图像中的时间和空间元素,这对于气候和天气数据的可视化尤为重要。例如,需要在几秒或几分钟内捕捉过去的天气趋势,需要根据时间相关性绘制地图??。一个名为Nucleus的Nvidia工具是Omniverse的主要引擎,它将OR3D文件转换为USD文件并处理运行时、物理模拟和来自其他文件格式的数据映射。AI数据集可以包括实时更新的天气数据,然后将其输入AI模型。NVIDIA将原始图像数据输入USD的多步骤过程很复杂,但可扩展。它可以支持多种数据类型,被认为比API连接器更可行(API连接器是特定于应用程序的,不能针对单个复杂模型中的不同数据类型进行扩展)。USD文件格式的优点是可以实时处理从卫星和传感器收集的不同类型的数据,这有助于构建更准确的人工智能模型。它还可以共享,这允许将其数据扩展到其他应用程序。
