Insights直播回顾——手语服务,助力沟通无障碍
HMS Core Insights第九期直播–手语服务,助力沟通无障碍,已于12月29日圆满结束,本期直播与小伙伴们一同了解了HMS Core手语服务的亮点特性、底层技术以及演进规划,下面我们一起来回顾本次直播的精彩内容吧!
【内容回顾】
1、 亮点特性——中文手语生成与虚拟形象展示。
2、 刨根问底——支撑手语服务功能实现的技术细节。
3、 循序渐进——手语服务在语种、词库以及手语识别上的演进规划。
【专家观点】
Andy, 华为AI算法专家
华为在很早之前就开始了无障碍沟通方面的探索,经过不断地积累与探索,我们将HMS Core手语服务这套能力开放出来,让更多开发者能够一起为无障碍沟通环境的建设添砖加瓦,也能在持续的应用与反馈中,不断完善手语服务的各项功能。
Jason,华为计算机视觉算法专家
HMS Core手语服务中,手语动作清晰、准确的表达是核心。我们基于业界领先的深度神经网络技术,实时将输入文本翻译为时序稳定、连贯且符合听障人群中手语使用者表达习惯的手语动作数据,同时,手语生成不仅包括手部动作和身体姿态,还支持10种面部表情的生成,力求准确表达。
郑璇,手语语言学顾问
无障碍沟通环境的建设目前已经成为了社会趋势,HMS Core手语服务通过先进技术的运用,为无障碍沟通环境的建设提供了技术基础,也让更多的开发者有能力,用科技帮助听障人群中手语使用者更好更便捷地生活。
【精彩答疑】
Q1:手语服务目前都有哪些亮点特性?
A:HMS Core手语服务是华为面向开发者提供的手语生成能力,其能够将文本实时翻译为流畅、自然且符合听障人群表达习惯的手语动作数据。此外,手语服务还能够通过数字人形象,清晰准确地表达包括手部动作、身体姿态以及面部表情在内的手语动作。
Q2:手语服务的功能是基于哪些技术实现的?
A: 手语服务的功能实现主要由基于机器翻译的手语转写模块和基于多模态融合的手语动作表情生成模块组成。通过自研中文预训练语言模型、整体替代机制以及加速技术整体提升了手语转写的精度及速度;通过多模态动作表情融合生成技术,手语服务能够实现自然连贯的手语动作生成,在高质量动捕数据较少的情况下,提高生成动作的准确性、平滑性。
Q3:开发者可以通过手语服务在哪些场景下应用?
A: 手语服务覆盖日常生活词汇,满足和家人、朋友在聊天、就餐、购物等应用场景,实现沟通无障碍;手语服务还完全遵循《国家通用手语词典》所列出的语法规则,不仅会《国家通用手语词典》里的8214个常用词,还会许多高频词汇,帮助普及国家通用手语标准,帮助听障儿童学习阅读,实现手语教学,此外手语服务还能够丰富听障人群的社会信息获取途径,拉近听障人群和社会的距离。
Q4:手语服务未来的演进规划是什么?
A: 针对现有能力,手语服务会进一步扩充词汇覆盖,满足更多场景应用,同时也将丰富数字人表情姿态,让手语动画更全面准确。手语服务还将进一步开放新功能,为更多的听障人士建立无障碍沟通环境。
【了解更多】
如果你还想回顾更多直播精彩瞬间,欢迎登录华为开发者学堂查看直播回放
如果你对手语服务感兴趣,欢迎登录手语服务首页了解更多技术细节。
了解更多详情>>
访问华为开发者联盟官网
获取开发指导文档
华为移动服务开源仓库地址:GitHub、Gitee
关注我们,第一时间了解 HMS Core 最新技术资讯~