当前位置: 首页 > 科技观察

当专业动画师用GAN帮自己“偷懒”,几分钟完成一周工作

时间:2023-03-20 19:14:22 科技观察

本文经AI新媒体量子位授权转载(公众号ID:QbitAI),转载请联系出处用于转载。当视效师和GAN强强联手,制作出来的动画会不会更好?答案是肯定的。这是一位视效师,利用海外版超人气小姐姐BellaPoarch的视频抖音,生成奥巴马TikTok版动画:不仅动画效果逼真,而且表情生动,并且GAN生成的字符不会出现意外。”脱模”的情况。当时,这位专业的动画师一接触到AI,就看中了AI做艺术的“能力”——用GAN只需要几分钟就可以将视频中的一个角色动画化。在相比之下,如果用普通的软件做动画,动画师可能要花几个星期的时间。但是,他很快就发现,现有的AI人脸动画模型制作出来的卡通形象太丑了。如下图,用AI给Shinzo做动画后之前的安倍,卡通人物的脸不太好看……△动画之后,看到黑堂有点奇怪,于是干脆自己动手,结合已有的GAN模型进行优化调整。太棒了!不仅普通的人脸看起来像加了特殊的美化效果,卡通形象堪比迪士尼动画中的主角:连奥巴马都“回春”了,比开机时更年轻了美女化。而且,任何人都可以控制这些卡通人物的表情,甚至是预先录制的视频。那么,这样的动画效果是怎么来的呢?迁移学习的妙用这位视效艺术家选择了用一种特殊的方法来制作好看的卡通人物。他使用迁移学习生成一个7×6的表格,根据迁移学习的强度生成不同风格的人脸。也就是说,迁移学习强度越大,角色越接近卡通,迁移学习强度越低,角色越接近真实形象。可以看出,图像越靠近左下角,人像越逼真;图像越靠近右上角,角色越接近卡通。这样可以最大程度的保留人物的特征,让卡通脸看起来更逼真。而且,AI还能根据“客户需求”判断出更合适的人像,并进行数据训练。就连尤金老爷子看起来也年轻了许多,甚至还有几分中老爷子的慈祥。其中,视觉效果艺术家使用GAN生成卡通人物形象。它不仅可以“性别转换”,还可以改变年龄。视觉效果艺术家使用的基本模型是JustinPinkney和DoronAdler的StyleGAN2FFHQ(Nvidia的模型),主要基于DeepAI。StyleGAN的原理是舍弃了输入层,加入了一个非线性映射网络。此外,它创新了一种称为基于样式的生成器的生成器,可以控制生成图像的高级属性,例如发型、雀斑等。而且,这个StyleGAN自带一个开源数据集FFHQ,其中包含各种人脸数据集。视觉效果艺术家对StyleGAN2FFHQ进行了微调。GAN生成的人物形象不仅可以卡通化,还可以风格化,生成相似的人物表情和特征。不仅可以卡通化可爱的小孩,还可以根据眉毛和五官来构建女孩的脸:如果角色“长大”,建模出来的女孩脸也会变得更成熟:这个软件还没有开源,因为看来视效师对自己制作的动画不是太满意,认为还有很大的改进空间。不过,网友们似乎有些不耐烦了。一些热爱二次元的网友表示,希望有这样一个工具,可以把所有的漫画都变成动画。也有网友表示这样的工具看起来不错,不知作者对作品满意后是否愿意开源。希望这位视效师能够达到他的目的,将这个模型的代码开源。作者介绍了内森·希普利(NathanShipley),他是视觉效果艺术家、动态图形艺术家和创意技术人员。目前的研究方向是人工智能生成艺术。此外,特效师还于2019年为佛罗里达州圣彼得堡的达利博物馆“复活”了超现实主义画家萨尔瓦多·达利本人。对画家达利的作品感兴趣的朋友可以在屏幕上看到达利的“问候”只需按下按钮,就会以非常逼真的表情呈现给您。如果您对他的艺术作品感兴趣,可以点击下方地址查看主页。NathanShipley主页地址:http://www.nathanshipley.com/gan