你还记得《哈利波特》中的《预言家日报》吗? 《哈利波特》世界上有一份神奇的报纸。
报纸上照片里的人物可以动,看起来有点像GIF图片。
故事里,这当然是“魔法”的结果。
现实世界中还没有创建过这样的报纸。
然而,华盛顿大学的几位科学家并没有放弃。
他们想利用人工智能算法让照片中的人动起来。
这种技术称为照片唤醒。
其实之前也有人做过类似的尝试,将照片中的2D图像映射到3D模型上,然后让它们动起来。
但结果却如同行尸走肉。
由于2D图像是从某个固定角度观看的,如果用3D模型的标准来控制就会出现不匹配的情况。
更何况目前还没有合适的模特来匹配毕加索画中的人物。
使2D图像移动的另一个困难是难以控制身体的重叠部分。
走路时哪只手在前面?哪只手在后面?还需要身体去阻挡。
如果这些复杂的问题不解决,就不可能达到逼真的效果。
团队给出的解决方案是AI算法。
首先,将2D图像与3D变形模型进行匹配,并标记每个身体部位的位置。
然后按照变形算法逐步构建网格。
根据关键点位置控制网格,恢复皮肤数据,构造纹理。
最后,将纹理放回原图,用算法填充背景,角色就可以逃跑了!团队还特别提到,头部姿势的准确性对于移动人物来说非常重要,因为大多数人都会关注角色的面部。
因此,他们的算法还可以识别图像的头部角度以及注视方向。
为了让这个算法变得实用,团队还提供了一个调整选项,允许用户改变关键点的位置。
该技术可应用于AR和VR领域,并与相应设备配合使用。
想象一下,未来我们在博物馆里看到的艺术画作可能会让人感动。