当前位置: 首页 > 科技赋能

售价200元的HoloKit能否与微软HoloLens竞争?

时间:2024-05-22 17:13:47 科技赋能

一个不到2万元的盒子,堪比2万元以上的微软HoloLens。

这听起来可靠吗?如果你了解什么是AR(增强现实)眼镜,就应该知道目前市场上体验最好、技术最强大的就是微软的HoloLens。

错过了移动互联网潮流的微软,为了赶上下一波混合现实(Mixed Reality),投入巨资,打造了这样一副充满黑科技的眼镜。

“让虚拟图像自然地融入人的视野中,就像真实的物体一样。

”这么简单的一句话基本上就是所有增强现实/混合现实体验的基础——其实AR眼镜的问题很简单,简单来说就是一个“定位”和“显示”的问题。

前者可以让虚拟物体固定在原地,不会到处漂浮,后者则可以让虚拟物体看起来色彩饱满,不假。

然而,实现这一目标说起来容易做起来难。

微软甚至专门为 HoloLens 打造了一款 HPU 芯片,以处理来自相机和传感器序列的所有数据。

在定位技术SLAM方面,配备四个摄像头和一个深度摄像头的HoloLens非常稳定,绝对击败目前市场上的所有设备;更不用说令人惊叹的光波导显示解决方案和3D音频系统……当然,它的价格也非常感人。

大陆官网售价分别为商业版8元和8元。

然而,就在 6 月初,苹果推出 ARKit 前后,一位 ID“Amber Hu”(真名胡波涛)的小伙子在知乎上发布了自己的 HoloKit 计划,声称用一个价值 30 美元的纸箱打造了一款“可比”的设备。

到 HoloLens”。

“效果不错的混合现实眼镜”在业界引起不小的轰动。

很多AR企业的高管都将这篇文章转发到了自己的朋友圈,有的甚至直接发给了作者本人。

当然,这也引发了一些疑问。

然而,苹果的ARKit很快就流行起来。

国内媒体铺天盖地报道,培训机构也纷纷跟进。

各种ARKit相关的demo如雨后春笋般涌现,HoloKit的声音自然被淹没了。

没想到,网易在7月15日突然宣布,网易精选将代理HoloKit产品。

网易相关人士向晴听网表示,该产品将于年底在网易精选上上线,届时产品各方面都会进行升级。

胡波涛还告诉青听网,目前HoloKit项目与他基本没有任何关系。

“网易愿意商业化,所以我们授权给他们。

”那么,HoloKit 是什么样的呢? 2万元以下的盒子,堪比2万元以上的微软HoloLens。

这听起来可靠吗?与 HoloLens 相比如何?根据胡波涛在知乎上发布的对比表,从FOV来看,HoloKit号称比微软HoloLens有较强的优势,清晰度更高。

当然,Magic Leap除了少数记者见过之外“仍然是一个传奇”,而且效果恐怕不如HoloLens,所以我就不谈了。

但无论 PR 怎么说,首先,我们可以在这里得出结论——“比 HoloLens 更好”是绝对不可能的。

“效果”是一个多元化的东西,包括定位、展示、互动等综合产品。

像国内外的一些公司,他们公然吹嘘某些参数比HoloLens还高,让他们在PPT上所向披靡。

这是一个非常糟糕的问题。

还是我之前说的,微软奉献了世界顶尖的人才,努力了很多年,却被你们的创业公司轻松超越了?正如一位业内人士所说,“这将是整个行业的耻辱。

”从实际产品中可以看出,这个东西与一体机HoloLens和连接电脑的Meta 2不同。

它是一个需要插入手机的设备。

因此,可以理解为这是一个AR手机盒子。

如果你不知道这是什么,你可以认为它类似于Cardboard,谷歌之前发布的纸板盒,以及很多国内VR公司的产品,例如小米VR玩具版。

其实AR盒子并不新鲜:国内也有一家叫RealMax的公司在做类似的产品和光场视觉的AR BOX,但这些在显示和定位效果方面都不尽如人意。

Meta前员工打造的DreamWorld展示相当不错,但定位方案尚未发布。

国外还有一个众筹项目叫Aryzon。

虽然筹集了很多钱,但效果如何还不知道。

擎听网此前曾揭露过AR手机盒子的现状以及国内不少产品的粗制滥造(VR走后,AR手机盒子又回来了,是真正的需求还是骗局?)。

从笔者与业内人士沟通的反馈来看,大多数人似乎并不看好AR盒子。

一位业内人士告诉青听网,他看过国内两家AR公司的手机盒子解决方案,“效果相当一般”。

不过,“我犹豫了很久,一度想过自己做一个,毕竟便宜。

”笔者当时表示最大的担忧是,这种相对廉价的AR体验是否会给用户留下AR“仅此而已”的印象,损害整个行业的长远发展?不客气地说,“展示”和“定位”两个核心问题还没有解决好。

那么,HoloKit是如何解决这两个核心问题的呢?接下来我们就抛开成见,从技术角度来分析一下这款产品。

有必要使用AR手机盒子吗?事实上,如果能够解决定位和显示的问题,AR在手机上也并非不可行。

没看到苹果在6月初也发布了ARKit吗?事实上,ARKit 在 iPhone/iPad 上使用的是 RGB 摄像头,但它在“定位”方面做得非常好——在苹果的实际演示中,虚拟物体非常牢固地停留在桌面上,不像一些国产 AR SDK 那样,它漂浮在周围。

我们先来说说显示器。

HoloKit的光学解决方案其实非常简单。

iPhone屏幕上的图像通过镜子,然后通过半反半反镜反射到眼睛中。

它是镜面反射,类似于潜望镜。

事实上,光学解决方案与Meta类似。

国内很多AR眼镜也采用这种方式。

详情可以阅读青听网《特稿 | 你不知道的CES真相:AR眼镜,想说爱你不容易》之前的文章。

从体验来看,HoloKit的清晰度和FOV都比较大——这确实比HoloLens的34度视场角还要大。

当然,这不能对HoloLens进行严厉批评。

他们的光学方案本质上决定了FOV不可能这么大。

色差确实会导致某些问题。

但半反射半透明光学解决方案的问题在于它实在太大、太原始、太笨重。

无论是90度FOV Meta、90度梦幻世界,还是各种手机盒子,都与我们想象中的“普通”相差甚远。

“眼镜”形式的AR眼镜与之相去甚远。

因此,未来的光学解决方案永远不会是这样的。

我们来谈谈定位解决方案。

HoloKit的定位方案虽然还有些浮动,但整体还是比较稳定的,效果也不错。

然而,Apple ARKit 和 HoloKit 都不是真正的 SLAM。

从苹果公布的文件来看,极有可能是VIO(Visual-Inertial Odometry)。

VIO使用单目或双目相机进行识别匹配和深度估计,使用惯性测量单元进行初始水平面估计和3个自由度,最后使用一套算法进行拟合。

当然,这个算法本身的难度就非常高。

VIO 勉强可以理解为一种模拟,而不是像 HoloLens 那样真正识别并重建周围环境来完成 SLAM。

HoloLens 在这方面是无敌的,但将其与手机进行比较并不公平——SLAM 对手机来说更重要。

资源消耗巨大,在手机上基本不可能实现。

因此,也可以理解为什么HoloKit目前无法实现遮挡(即伸手无法挡住虚拟物体),而我也确实做不到。

胡波涛本人也大方承认,这不是SLAM,而是VIO。

他的算法其实不是他自己的,而是参考了香港科技大学的一篇内部论文。

HoloKit是基于后者的开源定位项目VINS开发的。

他本人负责把这套无人机用的算法放到手机上。

他向擎听网指出,整个算法有约30毫秒的延迟。

不过,虽然定位和显示方案受到一定的限制,但AR手机盒子也并非那么不堪。

目前,在AR眼镜尚未普及的情况下,手机无疑是让大众接触AR最直观的设备。

我们可以想象,与手机上的AR相比,AR手机盒子和手机上的AR的区别在于,一个需要你举起手机才能看到屏幕,而另一个则需要你将手机放在头上,通过眼睛的反射看到手机上的内容。

也就是说,手机在这里取代了传统AR眼镜的微显示屏。

因此,如果产品不太重、显示效果还可以、虚拟物体的定位稳定的话,“AR手机盒子”可以作为真AR眼镜出现之前的过渡方案。

笔者愿意相信胡波涛“希望更多开发者接触到混合现实,激励更多人创造混合现实的未来”的初衷——这个廉价的解决方案对于教育早期市场确实具有积极意义。

只要前提不说“用 30 美元的纸板箱打造比 HoloLens 更好的混合现实眼镜”,那就完美了。

可以在安卓上实现吗?那么,HoloKit 的算法与 Apple 的 ARKit 相比如何呢?胡波涛在这方面也颇为诚实。

他表示,ARKit的帧率是HoloKit的“两倍”,因此开发者可以选择自己喜欢的解决方案。

胡波涛从一开始就将HoloKit开源,开发者可以基于源码自行进行二次开发。

然而HoloKit的核心技术其实是它的定位解决方案。

如果没有这套算法,根据我们上面的介绍,硬件本身其实并没有什么奇怪的。

胡波涛告诉笔者,目前HoloKit仅支持iPhone 7 Plus和iPhone 6s Plus,不支持一般Android机型。

在实际开发中,他发现苹果手机的一致性非常好,调整一个设备后就几乎一样了。

Android设备种类繁多,令人眼花缭乱。

每个手机的IMU和相机参数都不同,校准起来非常困难。

甚至同一手机不同批次的参数也不同。

虽然谷歌现在有自己的基于TOF的AR平台Tango,但由于必须有TOF模块,所以支持的手机非常有限,目前只有两款。

随着苹果自家ARKit来势汹汹,如果能够将HoloKit算法移植到通用Android平台,让非Tango的Android手机也能使用,显然会创造出更大的潜力和更多的想象空间。

不过,这个要求对于胡波涛的团队来说或许“太高”了。

目前,团队中只有胡波涛算全职,另一位斯坦福同学朱丰源算兼职。

“我们只有一个半人,实在没有力气继续下去。

我们将这些东西开源,并将后续工作交给开发人员”。

HoloKit在现场使用了国外知名的单目手势识别SDK Manom??otion,还有一个听说是从“淘宝10块钱”买来的手柄,展现了未来交互方式的可能性。

在国内深耕AR领域已久的Touchview Infinite在网易发布会上宣布,将为HoloKit提供手势识别SDK、互动AR游戏体验等,或许随着更多的开发者和企业的进入,将会有更多的开发者和公司加入。

未来会有更多互动的可能性可供选择。

网易的AR/VR布局?网易相关人士透露:“Holokit是第一个让行业、开发者、用户低成本、低门槛进入混合现实的好工具。

开发者第一次有可能低成本验证想法并快速尝试。

”第一次,用户有可能以低成本验证想法;方便购买和体验沉浸式感知,并且通过HoloKit积累的经验和产品可以在未来延伸到更丰富的沉浸式体验。

“此前,网易手游《阴阳师》已经推出了AR玩法。

虽然在游戏中召唤“式神”只是比较简单的图像识别。

腾讯、支付宝等各大公司也在积极开发AR游戏。

比如阿里巴巴推出了AR捉迷藏,QQ也推出了AR火炬等营销计划。

因此,有业内人士猜测,网易持有该游戏IP,可以通过HoloKit将其未来的AR游戏商业化。

据称,网易一直非常重视VR/AR领域。

这个策略是丁磊亲自制定的。

他也在公司内部会议上多次强调了它的重要性。

在资本领域,网易走的是高端路线。

它投资了VR直播巨头NextVR和触觉技术公司AxonVR,以及一家名为UploadVR的媒体公司。

去年8月,网易CEO丁磊出席活动时,公开表示公司已经有VR/AR游戏。

网易看到HoloKit项目后非常感兴趣,希望将这款产品引入国内。

已经开源的胡波涛也很高兴看到这样的事情发生。

网易表示,这个项目的目的是帮助教育早期的AR市场,“其实并不是为了赚钱”。

至于胡波涛,他现在已经忘记了这个项目。

对于他的下一个项目,他希望开发一个基于HoloKit技术的博物馆AR项目。

“我们是一家新媒体艺术工作室,我们把自己定位为艺术家。

创作作品的人不会停留在一个项目上。

”其实国内已经有人拿 HoloKit 方案来筹集资金了,甚至声称筹集了数百万元。

不过,胡波涛只是一笑置之:“好吧,其实我对此感觉很好,反正我是。

玩。

如果别人的行业是基于开源协议的,如果他们违反了协议我们就无法控制。

也许网易可以控制他们。