在去年的 SIGGRAPH 上,Hao Li 进行了令人印象深刻的技术演示。
该演示展示了放置在 Oculus 耳机上的深度传感器设备,用于跟踪您的面部运动。
结合 Oculus 耳机内部的传感器,该系统可以将大多数面部表情转化为 VR。
我们知道面部跟踪在 VR 中很重要,但 AR 已经在使用这项技术。
这就是 Facebook 收购 MSQRD、Apple 收购 Faceshift 的原因。
我们每天都用面部表情来交流,但我们自己却没有意识到。
当我在寻找面部跟踪解决方案时,我想到了Hao Li,并了解到他们开发了一种解决方案,可以使用“单个RGB输入”实时跟踪面部运动,而不需要深度传感器。
据李介绍,他们创立了 Pinscreen,并获得了来自 Lux 和 Colopl Next 的 10,000 美元种子投资。
该技术可以识别头部动作和面部表情,即使头发、太阳镜和手遮挡了部分脸部。
“我们拥有一项新技术,可以使用一组新的深度学习算法从单个帧构建完整的化身,包括头发,”李说。