当前位置: 首页 > 科技观察

难以置信!小冰数字孪生虚拟人直播70天,没人发现不是真人

时间:2023-03-19 20:29:31 科技观察

极好的!小冰数字孪生虚拟人直播70天,却无人发现不是真人全球第一对真人难分伯仲的数字孪生N小黑和N小白来了。新数字革命的演变越来越触手可及。“目前,公司正在配合相关前期工作,承诺的履行还在进行中……”12月17日,《每日经济新闻》主播N小黑口若悬河地播报了当天的新闻,每个人都拿着手机兴致勃勃地看着,但没有人注意到——这个主播是“假的”。他是世界上第一个与真人无异的数字孪生体N小黑。而且,不仅N小黑是虚拟的,他还有一个数字孪生伙伴:N小白。更让人意外的是,其实两人已经连续70天合作直播新闻,却几乎没有粉丝和用户能看到。大概是因为他们的脸、表情、肢体动作等等都太真实自然了。只是偶尔会有不少人疑惑:“这两个主播也太敬业了吧,天天上班?”第一批真假难辨的数字孪生主播来了。直到12月20日,官方才揭晓答案。N小黑播完财经资讯后,亲自宣布实情:“大家好,我是每日经济新闻的人工智能主播,我不是我自己,而是他的数字孪生,我一直悄悄上线,一直在跑70天不间断,天啊,很多人以为这是人为主播预录的视频,其实不然,你看到的一切,包括我讲述的文字,都是由人工智能小冰框架生成和驱动的。“此时的他,依旧清晰自然的说着话,还加上了手势和微表情,和抖音上《N小黑财经》里他真人的状态没有区别。他们背后的“厂商”小冰也正式宣布,基于小冰深度神经网络渲染(XNeuralRendering)的全新数字孪生虚拟人即将到来。这是他们首次将人工智能虚拟人的整体自然度提升到与真人几乎无异的水平。小冰与每日经济新闻联合打造的数字孪生主播N小黑和N小白也于当天与“每一镜AITV”一同上线。值得一提的是,小冰首次实现了视频采编播全流程无人化操作。基于这一进步,“每景AITV”也成为全球首款24小时直播的AI视频直播产品。不过网友们也是见多识广,自然会有不少质疑。比如AI主播已经司空见惯,新华社、央视都做到了。这两位新“虚拟主播”有什么特别之处?新技术带来了哪些进步?如何?对我们的未来有什么改变?接下来,让我们更进一步。数字孪生主播带来了哪些新技术?先简单说一下这两位“虚拟主播”的诞生过程。首先,两位虚拟主播的训练数据均来自知名财经主播N小黑(N小黑财经)和N小白(每经小白基金)。然后结合小冰神经渲染(XNR),可以大幅提升包括面部、表情、肢体动作等在内的整体自然度。最终,通过小冰框架的小样本学习技术,只需要一周的训练,就诞生了这两个数字孪生体。听起来容易吗?事实上,仅就训练周期而言,以往虚拟人的训练周期需要几个月,这也造成了虚拟人周期长、成本高的问题。但如今虚拟人再次成为全球热点,这个问题总得有人来解决。学术界和工业界已经开始行动。今年11月的《中国计算机学会通讯》封面主题是《计算机图形学与人工智能融合》,有6篇专业文章探讨CG与AI从技术到应用的广泛融合,并希望将计算机视觉、自然语言处理、计算机语音和深度学习融为一体方法引入CG,希望将人为驱动转变为数据驱动,将人工算法升级为基于数据分析的自动算法,提高系统的整体易用性和效率。具体到N小黑和N小白这对数字双胞胎,则意味着一个长期困扰娱乐和媒体行业的难题——即“如何高效逼真地渲染虚拟人”——或许有了新的解决方案。不怕暴露年龄的网友们,应该还记得16年前《最终幻想7:圣子降临》的勇敢尝试,以及《阿凡达》的惊人细节——那是十多年前,影视行业制作虚拟人的时代周期和成本以年和数百万美元来衡量(这只是主角的头发渲染)。为什么小冰可以将深度神经网络渲染技术(XNR)与CG相结合来解决这个问题?一方面,与传统CG相比,该技术可以充分利用深度学习从大量数据中提取数据先验,实现传统渲染过程中某些模块的加速和轻量化。简而言之,它渲染得更快。另一方面,基于深度学习的3D场景表达和相应的神经渲染管线可以在特定场景中发挥作用,使虚拟人的视觉形象、表情、肢体动作更加逼真。简而言之,它渲染得更好。解决这个问题,这项技术可以创造巨大的商业价值。然而,仅仅通过CG和AI的融合创造一个人类是不够的。如何呈现一个虚拟人,呈现什么内容,对于大众来说是最重要的。N小黑、N小白等虚拟主播最大的不同在于,他们的图像不仅是通过AI建模生成的,而且从金融信息的文本生成到通过预训练的虚拟主播进行音视频同步播放,以及然后再结合同步场景的动态绘制,最终生成一个完整的直播,这一切都是由AI完成,不需要任何人参与。这也是全球首次真正实现人工智能采编播全程自动化。对此,在小冰公司CEO李迪看来,“永不疲倦、安全可靠、输出稳定的AIBeing时代已经到来。”N小黑和N小白预示着怎样的未来?现在,我们对虚拟人越来越熟悉了。他们背后的虚拟数字技术的进程是飞快的。在形象拟人方面,洛天依和凌远掀起了二次元虚拟人的热潮。现在玲玲、阿亚依、阿喜等超逼真的虚拟偶像越来越受欢迎。回首过去,数字孪生的未来离我们越来越近了。从英伟达发布会上黄仁勋对大家的“坑爹”,到小冰最新的N小黑N小白,可见各类虚拟人在追求“真实自然的道路”上越走越远。在通往真实自然的道路上,还有更大的障碍,比如虚拟人的内容、交互、多样性等。传统上,业界通常采用CG和动作捕捉相结合的方式来打造虚拟人,完全依赖人力,周期长、成本高。关键是没有内容,没有交互,固定的人设。从这一点来看,N小黑和N小白是利用小冰的人工智能技术,打造了CG与人工智能融合后的框架全量图。例如,从内容和交互方式来看,传统虚拟形象要么只有平面硬照(换脸),要么只有文字(人工操作),中间加上人后才能说话、唱歌、互动。而能在视觉、声音、文字上自由表达的数字孪生N小黑和N小白,也预示着虚拟人的交互即将实现多模态——还记得两年前带大家去日本水族馆的Rinna吧,对吧?可以说,N小黑和N小白这两个数字孪生体的出现,有望为虚拟人在各个场景的普及开启新的未来。小冰团队还表示,近期会上线更多头像。从官宣材料来看,正在迪拜世博会中国馆展出作品的夏雨冰也即将开幕?