HMSCoreInsights第九期直播-手语服务,助力沟通无障碍,12月29日圆满结束,本次直播跟小伙伴们一起学习了HMSCore手语服务亮点、底层技术、演进规划,一起回顾本次直播的精彩内容!【内容回顾】1.亮点功能——中文手语生成及虚像显示。2、一探究竟——支撑手语服务功能实现的技术细节。3、步步为营——手语服务在语种、词库、手语识别方面的演进方案。【专家观点】华为AI算法专家Andy华为长期以来一直在探索无障碍沟通。经过不断的积累和探索,我们开放了HMSCore手语服务的能力,让更多的开发者可以一起为无障碍交流环境的建设贡献力量,同时我们也可以不断完善HMSCore手语服务的各项功能通过不断的应用和反馈来提供手语服务。华为计算机视觉算法专家JasonHMSCore手语服务,清晰准确的手语动作表达是核心。我们基于业界领先的深度神经网络技术,将输入文本实时翻译成时序稳定、连贯且符合听障人群手语使用者表达习惯的手语动作数据。同时,手语生成不仅包括手部动作和身体姿势,还支持10种面部表情的生成,力求表达准确。郑轩,手语语言学顾问无障碍交流环境的构建已经成为一种社会趋势。HMSCore手语服务通过先进技术的应用,为构建无障碍交流环境提供了技术基础,也让更多的开发者有能力用技术帮助听障人群的手语用户生活起来更好更方便。【精彩问答】Q1:目前手语服务有哪些亮点?A:HMSCore手语服务是华为为开发者提供的手语生成能力。可将文字实时翻译成流畅、自然、符合听障人士表达习惯的手语动作数据。此外,手语服务还可以通过数字化的人像清晰准确地表达包括手部动作、身体姿势和面部表情在内的手语动作。Q2:手语服务的功能基于哪些技术?A:手语服务的功能实现主要由基于机器翻译的手语转录模块和基于多模态融合的手语动作表情生成模块组成。通过自主研发的中文预训练语言模型、整体替换机制和加速技术,整体提升了手语转写的准确率和速度;通过多模态手势和表情的融合生成技术,手语服务可以实现自然连贯的手语手势生成,在高质量、较少动作捕捉数据的情况下,提高生成动作的准确性和流畅性。Q3:开发者可以在哪些场景下使用手语服务?A:手语服务涵盖日常生活词汇,满足亲友聊天、用餐、购物等应用场景,实现无障碍交流;手语服务还充分遵循语法规则,列出8214个常用词,以及众多高频词汇,帮助普及国家通用手语标准,帮助听障儿童学习阅读,实现手语教学。此外,手语服务还可以丰富听障人士的社会信息获取渠道,拉近听障人群的人群和社交距离。Q4:手语服务未来的演进计划是什么?A:鉴于现有能力,手语服务将进一步扩大词汇覆盖面,满足更多场景应用。同时,还将丰富数字人的表情和手势,让手语动画更加全面准确。手语服务将进一步开放新功能,为更多听障人士打造无障碍交流环境。【了解更多】想回顾更多直播精彩瞬间,请登录华为开发者学院观看直播回放。如果您对手语服务感兴趣,请登录手语服务主页了解更多技术细节。更多详情>>访问华为开发者联盟官网获取开发指导文档华为移动服务开源仓库地址:GitHub、Gitee关注我们,第一时间了解HMSCore最新技术资讯~
