机器人皮肤、气动触觉手套……Meta将让未来的Metaverse拥有更真实的触觉交互。想要在元宇宙中看到高保真的虚拟世界,视觉交互是不可忽视的。不,Meta要研发机械仿生眼。是给某人的吗?不……梅塔说,以后会放在仿生人的身体里。看来这是要创造MetaHumans了?近日,该公司申请了一种名为双轴旋转机械眼球的机械仿生眼专利。据称,该专利中的技术可用于构建Facebook的AR/VR应用程序,以更快地呈现虚拟空间中的3D图像和体验。总之,这项专利可以看作是Meta在Metaverse中的又一次进步。Meta的下一步,Metaverse之眼?一份于2021年12月批准的“机械眼球100”文件称,金属球体是一种类似于人眼的机器眼,具有在中心点相交的两个旋转轴。从专利提交时间可以看出,这项仿生眼专利于2019年6月11日提交,2021年12月7日获批。该专利详细介绍了一种高性能逼真的机械仿生眼的设计。未来,机器眼将用作电子动画设备的一部分,以更精确地跟踪人眼的运动。在专利中,对这种仿生眼设计的描述似乎也相当复杂,部分设计意在模仿人眼的巩膜、视网膜和角膜,以及瞳孔和虹膜。为什么Meta要单独设计仿生眼?难道是为了《西部世界》的人工智能仿生学?据Meta介绍,机械仿生眼的设计与机器人头部相匹配,目的是让眼睛看起来更逼真。仿生眼将配备传感器,帮助它“看到”现实世界,并可以通过机器学习进行训练和改进。机器学习可能基于人眼运动数据,然后将这种能力映射到机器眼。该专利还提到,眼球将被放置在一个类似于人类皮肤的模具中。该模具可能包括头部和身体。有网友表示,“那么,他们是MetaHuman吗?”但这种设计具体用在什么地方,Meta发言人表示,“公司不评论其专利的具体覆盖范围或申请专利的原因。一般来说,专利并不一定涵盖我们产品和服务中使用的技术”要知道,Meta的仿生眼还可以提供更多的实际应用。仿生眼可以用作更精确地跟踪人眼运动的工具,以查看它在屏幕和图像上花费了多长时间。例如,眼球追踪技术经常被用在广告中,以观察用户对广告的喜欢程度。此外,眼动追踪技术还可以用于构建Facebook的AR/VR应用。比如一直爆款的Oculus头戴显示器,未来如果加持这项技术,会如虎添翼。正如知情人士所指出的那样,该技术可以加速该公司严重依赖眼动追踪的增强现实和虚拟现实应用程序的开发。不管怎么说,这种机械仿生眼技术,更加坚定了梅塔进军虚拟宇宙的决心。这不是Meta第一次考虑为机器人添加人类感官功能。早在去年11月,Meta就与卡内基梅隆大学(CMU)合作开发了一种轻巧的触觉机器人“皮肤”,可以赋予机器人触觉。机械仿生眼和人造皮肤的探索据说是MetaAI部门在2019年更广泛的机器人实验的一部分。这种皮肤叫做ReSkin,厚度只有2-3毫米,表面像橡胶一样有弹性。如果你仔细看图片,你会发现里面嵌入了磁性颗粒。当发生按压/触摸时,皮肤表面变形并驱动内部颗粒的磁场发生变化。这些变化由磁力计监测收集,并反馈给通过自我监督学习训练的AI模型。扎克伯格说它可以用于元宇宙中的虚拟对象,在与它们交互时给我们触觉。Meta首席人工智能科学家YannLeCun认为,机器人技术已经成为研究人工智能的途径。他曾表示,机器人技术是扎克伯格抵制的领域。LeCun曾表示,“这就是人工智能研究人员试图达到的目标,感知、推理、规划、行动形成一个完整的闭环,不断循环,最终能从环境中得到反馈。”仿生眼的主视觉,ReSkin电子皮肤Haptics的主视觉,以及Meta最具标志性的Oculus耳机融合了视觉和声音。可见,Meta在进入Metaverse的道路上,打通了人类视觉、听觉、触觉三大感官体验。事实上,在触觉方面,前段时间,Meta还透露了其七年的秘密研发项目“气动触觉手套”。这款触觉手套可让您体验通过气囊抓取虚拟物体时的真实触感。对于Meta而言,手套以及其他可穿戴技术将引领我们走向VR和AR交互的未来。然而,真实元宇宙中的体验不仅包括“视觉、触觉、听觉”三种感官特征,还包括嗅到不同气味、品尝不同味觉的能力。目前,在元界技术体系中,未提及的感受是嗅觉和味觉,这对攻克技术难题有着更高的要求。但是,未来没有什么是不可能的。谁说元宇宙是PPT?2021年11月,Facebook在Connect大会上更名为Meta,计划投资数千亿美元进入Metaverse。Meta的举动将所有人的注意力转移到了它创造的虚拟世界上。其实Meta在Metaverse的布局不仅仅是上面提到的这些项目,还有Avatar的研发。元界是一个具有沉浸式空间感的3D数字世界。在这个世界中,人们通过佩戴VR设备或植入芯片,创造出人类化身(Avatar),并融入其中。在元宇宙中,不仅有人,还有虚拟物品,更重要的是,还有机器人。除了人与人、人与物的交互,人与机器、机器与机器、机器与物的交互也很重要。与机器人相关的称为机器人元宇宙。RobotMetaverse是机器人理解物理世界的基础。上述提到的仿生眼、人造皮肤等技术,都是为了让机器人更像人、更逼真。Meta也在Metaverse中为提升人类体验做了很多尝试,并取得了相当多的突破。例如,CodecAvatar项目是一个使用3D捕获和AI技术来创建逼真的头像的系统。本项目从最初的高清化身开始,逐步发展为全身虚拟化身。在此过程中,开发了全身视频编解码器,让元宇宙中的人类化身能够支持眼睛、面部、四肢、躯干等更复杂的运动。例如,项目组通过EMG腕带进行XR输入,以及对人们移动手的方式进行了精确测量。人类化身已经取得了很多突破,所以在元宇宙中物理映射现实世界中的物体不是问题。比如虚拟宇宙中衣服的真实模拟,非常逼真。不仅完美再现了衣服面料的弹力,而且如果摇动衣服,衣服表面的褶皱也栩栩如生。所有Meta项目的研发都是为了让人们在Metaverse中有更好的体验。这也进一步印证了肖扎进入虚拟宇宙的宣言并非纸上谈兵。你期待Meta下一步拓展元宇宙吗?
