虎牙开放AI数字人能力,发布虚拟与现实结合的开放平台HERO。
2020年11月7日,虎牙在广州举办以“开放、连接、前瞻”为主题的“虎牙LiveTech大会”。
会上,虎牙发布了直播行业两大标志性技术成果:首个小程序开放平台和首个虚拟与现实赛事结合的开放平台HERO。
虎牙CEO董荣杰在发布会上表示:随着5G的到来,普通用户的流量不再是瓶颈,直播将真正迎来5-10倍的爆发式增长空间。
虎牙将在技术开放和虚实结合两个方向上发力。
,打造更加繁荣的内容生态,为未来互动创造更多可能,用5G+AI为直播内容带来革命性升级。
据悉,虎牙LiveTech大会是直播行业首个纯技术会议。
谈及本次发布会的目的,虎牙CTO赖立高表示:“科技驱动娱乐”一直是虎牙的发展理念,“开放”也一直存在于虎牙科技的基因中。
过去几年,虎牙凭借开放、互联的态度,在直播技术上持续引领行业。
现在,虎牙准备向更高层次开放,希望让全行业共享虎牙的技术成果,与广大开发者、协会、制造商、合作伙伴群体携手共进,共同打造更加繁荣的直播生态圈。
虎牙开放平台:科技包容、大众互动,不再只是一个大平台。
获得专利的直播是一种粘性极高的内容形式。
除了其固有的内容粘性之外,其互动性强、及时的互动方式也是吸引用户留下的重要因素。
原因。
虎牙科技总经理、开放平台负责人刘建强认为,在直播内容生态1.0阶段,实时弹幕、打赏、赠品等互动方式大大缩短了内容生产者与用户之间的距离。
2.0阶段,主播与用户的互动应该更加多元化,因人因地而异。
用户将能够更多地参与甚至影响直播内容。
因此,虎牙封装平台的技术能力以简单实用的小程序为载体,提供了一整套的技术开发服务。
开放内容包括核心直播技术、开发工具、数据服务等基础设施,以及营销、运营活动、应用商店等商业支撑服务。
接入开放平台后,开发难度和成本将大大降低。
即使是几个人的小技术团队,甚至是大学生,也可以结合自己的技术能力、服务能力和产品创意,在虎牙找到落地场景,对接盈利通道。
三位开发者代表在LiveTech大会上展示了三款运用了虎牙多项核心直播技术的小程序,其中包括辅助主播直播表演的《啵唧宠物》,以及定制虚拟宠物丰富直播内容的《啵唧宠物》; ,与游戏直播深度融合。
,用户通过赠送礼物协助主播过关;物联网赋能农牧业的《欢乐农牧》,利用直播技术实现用户互动养鸡,促进用户在线购买。
直播技术的开放,不仅丰富了直播互动方式,也让“黑科技”以高效、低成本的方式应用于更广泛的制作场景。
小程序星火计划:3年投入10亿资源 为了保证开放平台的低门槛准入和可持续发展,虎牙还发布了“小程序星火计划”,计划3年投入10亿元资源。
为开发者提供一系列技术、推广、商业化方面的教育和支持。
虎牙科技副总裁范世清现场透露,Spark项目的支持计划主要包括流量赋能和技术支持两个方面。
首先,依托虎牙的小程序应用商店、主播和观众终端等流量入口,以及头部主播、公会推荐和营销,保证小程序有足够的流量;另一方面,为了降低研发成本,虎牙将推出“小程序培育计划”,从专家指导、社区建设、开发者培训、技术支持四个方面提供技术支持。
在变现方面,目前的设计将有两种开发者福利模式,分别是订阅付费和应用内购买分享。
在订阅付费模式下,开发者可以根据小程序的价值灵活定义一次性付费或定期付费。
在订阅付费模式下,%的收入属于开发者。
应用内购的收入分成方式主要服务于小程序内部构建的增值服务模式,小程序内购产生的收入与开发者分享。
HERO,虚拟与现实结合的开放平台:打破时间和空间的限制,让直播无所不能。
5G的到来和AI技术的进一步发展,为虚拟影像在直播中的运用提供了天时地利。
目前,不少领先的直播、视频平台都加大了虚拟图像及相关技术的研发力度。
虎牙科技总经理、AI技术负责人徐佳表示,虚拟与现实技术的结合,将让直播在场景、人物、内容剧情等方面彻底突破时间和空间的限制,赋予直播颠覆性的内容升级。
发布会上,徐佳宣布虎牙在业内率先正式推出HERO(虎牙扩展现实开放平台),并发布基于该平台的首个直播AI数字人——虎牙联合研发的数字人和DK公会。
形象为《晚玉》。
显示屏中,数字人婉瑜的体型、动作以及眼睛、皮肤、头发等细节都与真人相同,科技赋予了她真实主播没有的街舞等天赋有。
徐佳表示,数字人背后是虎牙全面整合的一整套解决方案,包括建模、驱动、渲染三大核心技术,涵盖3D重建、人脸结构化、运动迁移和实时渲染等, AR融合等多项关键技术。
以建模技术为例,在数字人万鱼上,虎牙扫描出了1万张人脸的超高精度拓扑模型。
筋骨绑定后,可驱动的表情数量超过四万种。
四肢骨骼运动支持70余度自由度,能够真实还原日常动作、舞蹈等各种高难度才艺。
徐佳表示:“在HERO平台上,我们开放了数字人使用的相关接口和技术,让主播和开发者可以使用自己的设备来构建自己喜欢的图像和AR应用玩法。
截至目前,已有腾讯、Facegood、万向科技、凌云科技等多家合作伙伴加入HERO开放平台。
未来,我们期待更多的公会、厂商、开发者伙伴通过技术赋能加入我们的生态。
每个主播都可以有一个数字人。