当前位置: 首页 > 科技观察

全球首款3D版AI合成主播亮相,还将参与两场报道,网友:楼主快失业了

时间:2023-03-13 13:32:54 科技观察

本文转载自雷锋网,如有疑问请转载。大家好,我是AI合成主播家族的新成员——新小微。“辛小薇”一头整齐的头发,一袭蓝色的正装,坐在报摊前,一本正经地说话。AI合成主播并不少见,但会走路、会做手势、会换衣服的3D版AI主播,“新小薇”堪称全球首创。一开始工作,“新小伟”就被安排参加今年全国两会期间的新闻联播。“新小薇”上帖“新小薇”是新闻行业首个AI主播,3D技术呈现。它的原型是新华社记者赵万维。与以往的AI合成主播相比,“新小微??”最大的不同在于它的3D特性,丰富了播出形式,可以从不同角度全方位呈现。传统单景深雷锋网注:“新小伟”进入虚拟演播室(图片来源新华社)。可以看到,以往的AI复合主播大多都是坐在特定位置进行新闻播报,而“新小微”则可以进行行走、转身等肢体动作。不仅如此,“新小伟”在表达方式上也变得更加多元;不再只有“专业假笑”,更多的是微表情。雷锋网注:图源新华社不得不说,AI合成的主播越来越“像人”了。除了增强立体感和层次感,“新小微??”在智能化方面也有所提升。“新小微”项目负责人表示,在人工智能的实时驱动下,3D版AI合成主播可以实现连续自变功能。比如在“换妆/穿衣”方面,“新小薇”可以说比之前的AI主播“爱美”有过之而无不及。她的发型和妆容可以根据不同的场景和不同的新闻报道而变化。更何况,“辛小薇”的妆容细致到毛孔都能看到。如前所述,“新小微??”将在两会期间正式开工,并制作可量化的新闻直播视频。据新华社报道,只要在机器上输入相应的文字内容,“新小微??”就可以播报新闻,并根据不同的语义生成面部表情和肢体动作。随着“新小微”越来越智能,经过不断的迭代,“新小微??”的舞台不仅仅在工作室。相关负责人表示:随着3D虚拟场景的不断拓展,“新小微??”将走出演播室,更好地满足不同场景下新闻呈现的多样化需求。由此看来,只要实力足够,走出工作室不是梦。难怪网友感叹可能会失业。AI主播进入3D时代从表现来看,无论是表情、肢体动作、妆容变化,还是播报新闻的专业能力,“新小微??”都优于前者。问题来了,“新小薇”作为AI合成主播的“后浪”,到底用什么技术在海边拍出“前浪”?在数字人体模型方面,“新小微??”利用扫描还原、面部肌肉驱动、表情肢体捕捉等技术,还原逼真的头发和皮肤效果。在肢体运动方面,采集工作涉及海量数据。“新小伟”的原型赵万伟需要戴上数据采集头盔,数百个摄像头全方位扫描他的身体部位360°。不仅如此,摄像头的数据采集工作还包括面部表情扫描,无论是什么形状都能详细捕捉,作为“新微”诞生的基础。此外,基于搜狗分身的端到端多模态建模技术,结合语音、图像、文本、3D肌肉运动数据等多模态信息,可以完成“新小微”的建模训练。在AI算法的驱动下,“新小微??”的专业能力得到进一步提升,表情变化、唇部动作、肢体表情都能跟随语音文字变化。至于“新小薇”在妆容和服装上的变化,则是基于其“微模块化”的特点。项目负责人进一步解释:就像玩乐高一样,我们将“新小伟”的各个部分和表情进行了模块化,然后重新组装。随着“新小薇”入驻AI合成主播家族,意味着新华社AI合成主播家族又添新成员。早在2018年11月7日,新华社就迎来了全球首位以主持人邱昊为原型的全仿真智能AI主持人“新小昊”。据官方统计,首位AI合成主播“新小豪”已在新华社客户端服务观众500多天,先后制作新闻报道13000余条,累计时长超过35000分钟.搜狗CEO王小川介绍,智能AI主播基于“搜狗克隆”技术,提取真实主播的声音、唇形、面部表情等特征,再通过语音合成、唇形合成、表情综合和深度学习。和其他克隆技术。播报新闻时,只需提供文字,AI合成主播即可进行模拟播报。不过,第一代AI合成主播虽然令人惊叹,但也存在一些不足。比如之前的AI合成主播原型只有男主播,没有女主播;合成主播只有面部表情,没有肢体动作。2019年2月至3月,AI合成主播经历了两次版本迭代,迎来了全球首位AI合成女主播“欣小萌”。与第一代AI合成主播相比,“新小萌”进一步提升了用户的新闻视听体验,不再局限于坐着播新闻,还加入了一些肢体动作。并且在版本迭代的同时,AI合成主播的定制周期也在不断缩短。由于前期技术不成熟,需要使用大量数据。经过迭代,录制时间缩短了,录制的数据也减少了,几个小时的视频数据就可以形成逼真的图像。从“新小豪”到“新小萌”再到“新小薇”,每一位AI合成主播都会伴随着两种不同的声音。在赞扬技术进步的同时,也有一些缺点发声。以刚上线的“新小微”为例,有网友指出,读“AI”时“新小微”的发音有点别扭;这也从侧面说明,“新小薇”不够自然,还不能完全人。但是技术的发展需要在不断的迭代升级中积累一点点的量变和完善。从这个角度来看,“新小微??”取得了一定的进步。