VinWood打造的以太坊大放异彩。与此同时，web3.0带来的数字人和虚拟世界也生根发芽，带来非凡的用户体验。在互联网行业寻求打造新的元宇宙生态的背景下，数字人担负着信息的生产和传递，是连接虚拟世界和现实世界、提升用户体验不可或缺的一环。”链接新媒体。为了给用户提供更好的用户体验，京东金融APP在产品、价格、服务等方面不断追求最佳的商业表达和信息传递方式，在数字人的应用上进行了大胆的尝试。1、用户体验需求——从传统的图形展示、上下滑动??到个性化交互到2021年，我国互联网普及率达到73%，网民规模和人均上网规模增长时间趋于稳定，通过对Z世代用户体验需求的调研分析，Z世代用户拥有自己的文化圈、圈子语言、特征偏好，他们的行为和爱好具有鲜明的特点，他们不再局限于视觉角度和听觉网络通信交互，但追求更贴近的产品体验。他们对体验有需求nce升级，行业迫切需要新的突破点来满足他们的需求。诺贝尔奖获得者乔治·斯穆特曾说过：“虚拟现实的未来不是建立神奇的幻想，而是给现实生活带来积极的改变。”互联网时代的交互体验主要以二维信息为主。表达，在过去的十年里，我们拥有创造3D世界的技术。未来，当我们能够非常真实地感受到虚拟世界中的空间和时间时，我们有望接近4D阶段，即虚拟与现实共生，我们认为这可能是交互的最后阶段经验。京东金融APP作为国内金融科技行业的顶级应用，必须要满足未来用户的喜好，而尝试满足Z世代的产品形态，是我们提升用户体验的一部分。在深入了解互联网行业和集团内部的技术能力后，我们在多个技术方向进行了大胆尝试，其中数字人是高价值的部分。数字人等相关技术将帮助我们构建平行社会，打破长期存在的人机交互体验瓶颈，实现从人机交互向人与人交互的转变。为了获得真实的社会体验，需要有情感联系。人只有有了归属感，才能支持基本的社交和宇宙社交方式。不能只是传统的文字、语音、视频的形式，更多的是个性化交互的需求。升级。2、保持技术前瞻——洞悉行业和政策发展趋势纵观各个行业的发展历史，每个阶段的突破都会在量的积累达到一定限度后产生质的变化。互联网交互形式的演进也遵循这一发展规律，从web1.0到web3.0的每一个阶段都是从量到质的突破。静态互联网时代的交互体验，在Web1.0时代，也就是PC互联网时代，是一个群雄逐鹿的互联网时代。用户使用网络浏览器通过门户网站单向获取内容，主要进行浏览、搜索等操作。用户只是被动接受内容，纯人机交流，没有交互体验；移动互联网时代的交互体验，在Web2.0时代，用户不再只是内容接收者，可以在线阅读、评论、创作内容，成为内容提供者，也可以与其他用户交流，网络平台提供服务的成为中心和主导，汇聚海量网络数据；互联网时代的交互体验，在Web3.0时代，典型的特征是多对多交互，不仅包括Human-to-human，包括人机交互和多终端交互，只是最初的互联网时代初期阶段。真正的Web3.0时代一定是基于物联网、大数据、云计算的智能生活时代。“人人、时时联网、各取所需、实时互动”的状态，也是“以人为本”的互联网思维引领下的商业文明新时代。Web3.0是一场体验革命，也让互联网更加智能化、人性化。通过3D图形、AR/VR/XR、可穿戴设备、人机界面等技术的应用，将为用户带来前所未有的交互感和参与感。它使“Metaverse”逐渐从概念走向现实。以上述技术为基础，再叠加边缘计算、5G、云计算、人工智能等新一代信息技术，打造“全息互联网”成为可能。虚拟世界与现实世界的距离被控制得越来越近，界限变得模糊，个人体验从感知的物理世界延伸到虚拟世界。从元界的总体架构图中也可以看出，化身（数字人）是元界的技术核心。在宏观政策方面，国家大力支持数字经济。近一年，北京元界商标注册量位居第一，其次是广州、深圳、上海；此外，11月1日，五部委联合发布《虚拟现实与行业应用融合发展行动计划（2022-2026）》。同时，纵观互联网和金融行业现状，腾讯发布QQ小沃、字节发布抖音小沃、阿里发布数字生活和未来城市等虚拟场景、京东百货3D虚拟广告、摩根大通大通/证券银行也不同程度地推出了虚拟金融服务。3、探索新型交互技术落地——金融APP营销领域“虚拟数字人”赋能世界杯主题营销在金融科技领域，需要积极探索新的用户交互方式和新的用户体验。通过“金融元宇宙”进一步突破传统金融“时间”和“空间”的限制，让客户获得科技感、沉浸感、补偿体验。创新探索新机遇新竞争力，开辟业务增长新轨道。此次，借助世界杯的热点话题，通过连接虚拟与现实的虫洞技术——数字人，打造全新的营销体验。一、京东金融虚拟数字人1.1．虚拟数字人（digitalhuman、virtualhuman、avatar）是指具有数字化外表的虚拟角色。与物理机器人不同，虚拟数字人的存在依赖于显示设备。虚拟数字人具有多重人的特征：形象外貌特征、表达能力、感知能力和交互能力。京东延禧数字人对NLP、ASR、TTS、CG等多学科进行了深度融合，是多模态AIGC和人机交互技术的结晶。1.2.栩栩如生的身体——多模态智能技术。她可以在视觉上带来前所未有的全新体验，并且可以通过语音、文字、表情、手势、肢体等多模态进行融合协同，让数字人更加逼真，避免一些明显的违和感。感觉。人脸方面，在2D真人数字人方面，采用GAN深度学习算法，采用自主研发的3DNeuralRender神经渲染器，实现端到端的高保真人脸合成。唇形与TTS完美匹配，与音色无关，以流式方式实现多通道实时合成与用户交互，将训练数据压缩至6分钟以内，可进行大规模工业生产。在身体运动方面，开发了结合RIFE和Retiming的多帧多插入点运动生成过渡方案，实现了二维数字人体运动的快速平滑过渡。在3D逼真/卡通数字人方面，自主研发的STA唇形实时驱动技术精细驱动唇部运动和面部表情，生成逼真的3D数字人动画和实时交互。在动作方面，延禧研发的动作合成方案，基于RIFE帧插值和多插入点的快速动作转场，可以让数字人的动作更加流畅自然；在交互方面，2D和超逼真、高精度的3D数字化人驾驶解决方案可以实现精准的唇音同步。数字人说话时，牙齿甚至牙齿之间的缝隙都必须与嘴型精确对齐，以免看起来别扭。可以说，一个栩栩如生的数字人需要多模态的综合技术能力。1.3、移情心——实时人机交互技术。数字人不能只是“花瓶”，还可以与用户实时互动，做出合乎逻辑的反应。这种数字人就更难得了，因为难度也高了一个数量级。首先，实时交互需要快速的动作和表情渲染，这对AI生成的速度和质量要求非常高；其次，实时交互意味着很多反应无法提前产生，但需要真正了解用户的想法和需求并给出准确的回答，这就需要数字人类有丰富细粒度的知识突破、自然语言理解能力。、情感计算等能力。比如在数字人播场景中，用户想要了解产品A和产品B的异同点，数字人主播需要准确把握客户心理，对比信息，寻找卖点，生成有吸引力的文案。为此，基于京东云燕西人工智能应用平台，在智能多模态对话交互领域，基于理解准确度、知识覆盖度、交互流畅度、情感关怀五个维度的“新模式”，并提出任务完成情况。“图灵测试”系统作为人机交互服务机器人的标准，也是数字人的核心能力。2、利用数字人增强交互体验，与用户建立情感链接作为负责金融APP的用户产品开发团队，我们最贴近用户、最了解用户，拥有最丰富的业务场景。纵观以往我们负责的营销活动，每次的变化都是活动的玩法和页面整体UI的变化。从长远来看，用户已经对这类营销活动感到厌倦，而他们并没有因为玩法的改变，而为用户提升整个活动的交互体验，所以我们需要寻找新的交互方式来提高用户粘性和体验。起初，我们确定了三大业务场景，计划通过数字人来提升交互体验，与用户建立更多的情感链接。它们是规则脚本引入、情境关怀和业务增量场景。营销活动的规则包括玩法介绍、奖励领取与使用等，通常比较复杂。这一次世界杯赛制合并，规则也多了一些。鉴于用户通常没有耐心阅读所有的活动规则，并且考虑到复杂的文本内容无法被用户有效理解，数字人可以通过语音解释的形式讲述活动规则，因此让用户更直观的了解活动内容；同时通过场景的交互形式，引导用户选择球队。在用户的队伍被淘汰后，通过一些鼓励的话来鼓励和安慰用户。通过与数字人的互动，增加用户身临其境的陪伴、关怀和温暖，从而提高页面留存率。,增加用户停留时间和参与率。最终，我们从用户、产品、业务多角度综合评估最终呈现效果和研发成本，决定在永不选队、选队被淘汰、三种场景加入数字人机交互。开奖结果贯穿于整个世界杯营销活动中，既覆盖了核心场景，又避免了过度关心造成的用户困扰。同时，我们的数字人选择了一个接近“足球宝贝”的卡通形象。动作设计也诠释了“青春、活泼、可爱”的设定，让数字人停留在活动页面，增加世界杯的氛围和用户体验。公司。三、活动方式及场景介绍本次营销活动的主要方式是用户进入页面后获得一次免费抽奖机会。通过抽奖的方式，他们可以获得一个“抽奖码”。每个用户每天最多可获得5个“抽奖码”。》，每天只有一次免费抽奖机会，其余4次机会由用户完成某项任务获得。我们引入了世界杯热点话题，猜球中奖号码池翻倍或输。??当猜对时，除了获得自家号池的双倍奖励外，还将获得额外积分或京豆奖励。部分权益可通过获得的积分在我们营销活动的其他楼层兑换获取。.以下是我们的整体系统架构图和关键玩法流程图通过三种不同场景与数字人进行交流以及数字人在不同场景下的展示形式活动与数字人交流联合过程主动唤起1)当用户进入活动页面，没有选择队伍时，数字人会主动唤起用户，提醒用户选择支持队伍。2）当你选择的球队被淘汰，用户再次进入页面时，也会主动唤起数字人，引导用户重新选择球队。被动唤醒1）我们在活动页面总会有一个数字人的入口，当用户点击入口后，就会进入数字人交互界面。此时，如果你选择的球队的比赛还没有开始或者没有得分，数字人就会有一些预设的交互动作和相应的语音播报。但是当你选择的队伍获胜时，数字人会做出相应的胜利逻辑。数字人4.不同场景下的预期效果通过数字人与本次营销活动的结合，我们发现数字人的引入不仅给用户带来了全新的体验，而且通过数字化引导用户选择与球队相关的球队人类科技。与传统的引导方式相比，参与用户数量增加了30%。4、未来展望随着互联网的发展和技术的进步，交互方式迎来了一个新时代。web3.0时代带来了交互体验的质变，改变了交互对象和交互能力。传统的交互方式造成了人与现实世界的割裂。但是，未来的交互方式将能够实现人、现实、虚拟之间的交互。未来，我们将继续在分身、虚拟场景、虚拟服务等相关技术上发力，在虚拟数字人、web3D、AI等领域寻找新的落地场景，沿着从数字孪生到数字化的元宇宙体验本地人要实现超现实的改变，做好金融业务场景的探索。元界的发展历程我们坚信，人与世界、人与传感器将取代传统的交互方式，同时AR、VR、XR将使人们的生活更近一步。用户体验。随着5G乃至6G等技术的发展，信息传输的速度得到了提升，让信息传输变得无形。通过以上产品，将彻底改变未来人类的生活、学习和娱乐方式。数字人的实现是我们在元宇宙中的一次功能性尝试。目前的元宇宙生态还不成熟，但每一个技术点的突破和落地，都在完成京东金融的元宇宙拼图。我们也将继续通过创新，将新技术应用于更多业务场景，为用户带来全新的交互体验，用科技服务用户。
