当前位置: 首页 > 科技观察

这个人像生成AI可以“一秒”从简笔画生成真人脸

时间:2023-03-22 01:14:56 科技观察

随着人工智能技术的发展,它的用途也变得丰富多样。用于创建逼真图像的算法一直受到很多关注。  最近,这个领域似乎有了新的突破:一款名为DeepFaceDrawing的AI图像转换器,可以从一张简单的素描画出足以伪造的人脸图像,并取得了骄人的成绩。  AI与图像:逼真的错觉  其实已经有AI算法可以帮我们画出3D物体的平面图。该算法使用图论,首先将一个3D模型作为输入,对其进行逐级细分,最后绘制出这个3D物体的平面图像作为输出。  然而,如果我们反转这个过程,我们会得到另一种算法——一种可以从粗糙的图纸中获得逼真的图像的算法。虽然这看起来像是科幻小说中的内容,但NVIDIA的科学家们在一年半前就开始使用它了。  人们可以从左下方的选项中选择自己想要绘制的内容,并在右侧获得逼真的图像输出,然后就可以获得摄影风景图像。但它也有局限性——它无法创建逼真的人脸。  事实上,科学家们为实现这一目标做出了很多努力,但大多数类似的AI算法框架都需要详细且精心绘制的草图。因此,实用性和普适性不够高。  而一个全新的AI算法正在解决这些问题,这就是DeepFaceDrawing:从草图草图深度生成面部图像。  据了解,该项目由位于北京的中国科学院和香港城市大学的团队共同打造。DeepFaceDrawing也是迄今为止最先进的图像生成器之一。  手残也能画出相机级人脸  DeepFaceDrawing其实是一种基于深度学习的图像到图像转换技术。它从一个非常简单粗略的草图开始,创建一个逼真的面部图像。一个旨在帮助那些没有什么绘画经验的人。  根据该团队的说法,“我们的主要想法是从真实的面部素描图像中隐含地学习一个似是而非的面部描述空间,并在这个空间中找到最近的点来模拟该输入素描。”  DeepFaceDrawing的深度学习框架使用模块生成图像-CE(组件嵌入)、FM(特征映射)和IS(图像合成)。CE模块实质上识别了一些最显着的面部特征,例如眼睛、鼻子、嘴巴和目标面部的“其余部分”。FM和IS模块一起“将组件特征向量映射到真实图像”。  有了这项技术,用户只需要画一张草图作为参考图像,就可以得到一张与您的草图相匹配的近乎逼真的人脸。有趣的是,在绘制毛皮之前,它还会自动提供一些绘画起点。但是,如果我们选择自己创造想要的发型,它也会忠实地按照我们的图纸进行设计。  不仅如此,它还提供了更多惊人的功能,例如:可以帮助用户调整不同的五官,一次调整可以同时映射到多张可能的脸。  它还有一个有趣的功能——用户不需要画任何东西,只需要选择几个自己喜欢的五官,就可以得到一张由它们组成的理想脸。这就是所谓的面部复制粘贴。  新的突破,新的用途,新的BUG  这个AI转换器能够创建一些非常逼真的人脸图像。但是,还有一些问题需要解决。  比如一张女性素描中,两只眼睛大小不一,而在AI生成的对应图像中,眼睛的差异甚至会导致其他五官的变化,这显然不是本意的画家。  此外,DeepFaceDrawing似乎也主要生成以白人或拉丁美洲为主题的图像。然而,这些问题的解决只是时间问题。  在现实生活中,这项技术或许还有很多用途。该团队指出,他们的框架在“犯罪调查、角色设计、教育和培训等方面”特别有用。  此外,人们坚信数字艺术家将在不久的将来采用这项技术,它将帮助艺术家将他们的艺术愿景变为现实,这不仅会提高契合度,还有助于缩短实际执行时间.