当前位置: 首页 > 科技观察

二维动画唇动合成,根据语音自动生成动画人物嘴型

时间:2023-03-17 14:37:00 科技观察

您只需要输入一个语音,代码就会自动生成对应的动画嘴唇。依旧毫无违和感。这是一个在GitHub上有501颗星的开源项目,叫做RhubarbLipSync。它可以作为Windows和OSX的命令行工具使用,也可以作为软件的插件使用,从录音中自动创建2D嘴部动画。它可用于电脑游戏、动画卡通或其他需要根据现有录音制作嘴巴动画的电影和电视项目中的角色。那么它是如何达到这样的效果的呢?它是如何工作的首先,了解动画角色的六种嘴型。以上六种嘴型由汉娜-芭芭拉(Hanna-Barbera)发明,并成为2D动画嘴型的制作标准,并被迪士尼、华纳兄弟等影视公司在多部影视作品中采用.大多数发音都可以用这六种口型来表示。因此,RhubarbLipSync的工作原理如下:输入语音LipSync会使用六种基本唇形和最多三种扩展唇形来识别语音,以匹配语音并输出固定格式的文件如果我说一种奇怪的方言,它可以吗还输出对应的嘴巴动画?当然不是。目前,RhubarbLipSync只提供两种语音识别系统:PocketSphinx:只识别英文,准确率更高。语音:可以识别所有语言,因为它基于单独的声音和音节,但不那么准确。那么,这款小工具可以集成哪些视频软件呢?适用于多种软件。AdobeAfterEffects可以下载RhubarbLipSync并安装在AE上。您可以直接在AE上运行此软件。Moho和OpenToonzRhubarbLipSync可以生成.dat文件,Moho和OpenToonz可以识别并导入使用。SpinebyEsotericSoftwareRhubarbLipSynforSpine是一款图形工具,可让您导入Spine项目,执行自动口型同步,然后将结果导入回Spine。MagixRhubarbLipSyn的VegasPro还附带了两个用于VegasPro(前身为SonyVegas)的插件脚本,可直接在Vegas中使用。赶快把这个小工具推荐给喜欢制作视频的朋友吧~源码地址:https://github.com/DanielSWolf/rhubarb-lip-sync最新版本下载地址:https://github.com/DanielSWolf/rhubarb-lip-sync/releaseshttps://github.com/DanielSWolf/rhubarb-lip-sync/blob/master/extras/AdobeAfterEffects/README.adochttps://github.com/DanielSWolf/rhubarb-lip-sync/blob/master/extras/EsotericSoftwareSpine/README.adoc