您当前所在位置: > 爆料站 > 发号福利

搜狗发布全球首个手语AI合成主播

时间:2021-05-17 19:16:06  来源:  作者:网络转载

  5月17日,搜狐科技5G & AI峰会在北京举行,搜狗CEO王小川应邀出席发表主题演讲。活动中,王小川正式发布最新一代搜狗AI合成主播——全球首个手语AI合成主播“小聪”,基于搜狗领先的人工智能和AI分身技术,以“黑科技”的力量帮助听障人士更好融入社会,更好享受数字化生活。

  技术突破解决听障难题

  根据世界卫生组织发布的数据,全球听力障碍人群高达4.66亿,在我国则有2700万人。因无法常态化、高质量地接受资讯信息,很多听障人士难以融入社会,最终成为被遗忘和边缘化群体。

  目前,在以电脑、手机为载体的各类新闻资讯、文娱节目中,引入手语协助的少之又少。即使有能力的电视节目提供手语解说时,也多以正常语序编排,很少照顾到手语的特殊表达结构,造成绝大部分听障者只能理解不足60% 的内容。因此,通过技术创新实现听障人士真正可懂的手语播报能力,对于帮助听障者克服沟通障碍,更好融入社会非常有价值。

  “小聪”以打造听障人士真正可懂的通用手语播报为目标,立足于搜狗领先的数字人技术体系——搜狗分身,集成了超写实3D数字人建模、机器翻译、多模态数字人生成、迁移学习、实时面部动作生成及驱动等多项领先AI技术,实现了超写实3D数字人自然可懂的手语主播能力,使机器可以基于输入口语文本生成逼真度高、手语表达准确的3D数字人视频内容,从而具备“超写实的逼真数字人效果”、“高可懂度的手语表达能力”、“高接受度的手语展现效果”三大特点。

  三大优势凸显“小聪”能力超群

  数字人效果方面,“小聪”使用了行业最领先的3D重光照扫描还原、面部肌肉驱动、表情肢体手势捕捉技术,生产出了高度还原真人发肤、形象逼真、动作自然生动的数字人模型,数字人写实度的大幅突破则能够显著提升手语播报的真实感与亲切感,从而提高播报用户体验。

  手语表达方面,“小聪”基于《国家通用手语词典》,能够实现健听人语言与听障者手语语言的机器翻译能力,基于输入的健听人语言能够低延迟生成高准确率的手语语言表征,通过搜狗分身的多模态生成技术,实时预测生成对应的超写实3D数字人驱动参数,进而快速生成数字人手语播报视频,在测评中可懂度可以达到85%以上,能有效帮助听障者克服理解障碍,达成信息有效传递。

  手语展现方面,“小聪”可以完整实现手控信息及非手控信息的表达,通过机器翻译生成手语表征信息,覆盖手部动作、面部表情、口动唇动等多个维度,并基于搜狗多模态端到端生成模型进行联合建模及预测,生成高准确率的动作、表情、唇动等序列,从而达成自然、地道、接受度更高的手语表达效果。

  在此过程中,“小聪”还运用了业内领先的搜狗SLMT(Sign Langure Machine Translation)技术,在输出符合听障人士习惯自然手语的基础上,进一步提高了手语的可懂度、丰富和逼真了AI合成主播的表情与唇动能力,除了可以解决听障人士在日常生活、公共服务、特殊教育等多个场景下的信息不畅问题,还可以快速生成、批量复制,全年无休、随时随地提供服务。

  赋能于人彰显社会责任

  作为AI合成主播的开创者,搜狗分身一直是行业发展的风向标,也始终站在业内最前沿,而搜狗分身之所以能够“引领”行业,得益于搜狗高度的社会责任感,以及搜狗AI“赋能于人”的发展理念。

  自2018年发布全球首个AI合成主播至今,搜狗分身始终在坚定践行“以人为本,为人赋能”,而“小聪”的诞生,既是搜狗分身技术的再一次迭代突破,又是搜狗聚焦更加需要帮助的听障特殊人群,将“以人为本,赋能于人”贯彻得更加彻底、更有温度的体现,同时也充分彰显了搜狗的社会责任感和企业担当。

  作为全球首个手语AI合成主播,“小聪”能够帮助广大听障人士更好地接收资讯、更好地生活,更好地“看”世界,而从更高维度来看,它的广泛运用不仅可以造福国内听障人士,甚至可以走出国门、造福全球,彰显中国“智”力。

2

  【来源:Techweb】【作者:TechWeb.com.cn】

资源转载网络,如有侵权联系删除。
相关下载

玩家评论

数百家AppleStore可预约提供手语翻译服务

  自今天开始,在十多个国家和地区的数百家 Apple Store 现在开始提供手语预安排服务 。该服务是通过预约的方式免费向客户提供的。用户可以访问就近的 Apple Store,预约下详情>>

阅读: 5
日期: 2021-02-26
蓝少和平精英:训练场正确打开方式,可爱的手语问候,萌到你了吗?

蓝少和平精英:训练场正确打开方式,可爱的手语问候,萌到你了吗?详情>>

阅读: 20
日期: 2020-10-26
搞笑GIF段子:你们能看懂她打的什么手语吗_房租

你们能看懂她打的什么手语吗 我学魔术就是为了变钱 我说你瞄半天瞄啥呢 搞笑段子 1.中午在大润发门口的快餐店吃炒米粉。 结账时发现没有带钱,详情>>

阅读: 4
日期: 2020-10-20
苹果在其网站上提供“时光飞逝”发布会的美国手语翻译

  据外媒AppleInsider报道, 苹果周二在其 网站 上提供了“时光飞逝 ”(Time Flies)活动的美国手语(American Sign Language,简称ASL)翻译。 在ASL翻译的活动回放中,详情>>

阅读: 8
日期: 2020-09-16
研究人员发明新型可穿戴手套:可以实时翻译手语

  [PConline 资讯]据外媒Slashgear报道称,加州大学洛杉矶分校的生物工程师近日设计了一种可以使用智能手机应用程序将美国手语翻译成英语语音的手套。该项目的目标是为那详情>>

阅读: 4
日期: 2020-07-05
《黄帝颂》手语舞编排上线

原标题:《黄帝颂》手语舞编排上线 本报讯(郑报全媒体记者 张竞昳)庚子年黄帝故里拜祖大典,将于农历三月初三(3月26日)在郑州市新郑黄帝故里景区简约庄严详情>>

阅读: 4
日期: 2020-03-23
哈里·斯泰尔斯分享隔离日常,学习意大利语和手语_Papers

原标题:哈里·斯泰尔斯分享隔离日常,学习意大利语和手语 新京报讯 本周,“哈卷”哈里·斯泰尔斯在接受BBC某栏目采访时,透露了他隔离期间的日常。他说详情>>

阅读: 8
日期: 2020-03-20
有一招从天而降的棍法动图看这手语的样子歌词挺脏啊

【导读】得想个办法让他站起来 我好掏肛!我这里有一招从天而降的棍法!看这手语的样子歌词挺脏啊!这么土的阿迪是专为俄罗斯生产的?--> 没错,我就是第详情>>

阅读: 8
日期: 2020-03-13
朱广权再出金句!被称央视段子手一哥的他,是手语老师的“噩梦”_冷空气

原标题:朱广权再出金句!被称央视段子手一哥的他,是手语老师的“噩梦” 朱广权相信大家都不陌生了,尤其是这段时间,央视的这几位当家主播个个都成为了人详情>>

阅读: 13
日期: 2019-12-31
朱广权又出新段子,在挨巴掌的边缘疯狂试探_手语

原标题:朱广权又出新段子,在挨巴掌的边缘疯狂试探 12月5日,央视主播朱广权发微博参与话题#2019哪张照片最舍不得删# ,而朱广权晒出的照片是一张和他合详情>>

阅读: 20
日期: 2019-12-10
朱广权回应手语搭档采访,手语老师不易,且行且珍惜_段子

原标题:朱广权回应手语搭档采访,手语老师不易,且行且珍惜 朱广权大家都不陌生了,央视知名主持人,最近深得大家的喜爱,他现在的人气俨然有一种要超越撒贝详情>>

阅读: 11
日期: 2019-12-01
BLACKPINK的Rosé为粉丝学手语,笨笨的样子超暖心!

原标题:BLACKPINK的Rosé为粉丝学手语,笨笨的样子超暖心! 说到BLACKPINK的Rosé,或许很多人只是记得她的美貌,和她在台上劲歌热舞的魅力,但其实私底下的详情>>

阅读: 13
日期: 2019-10-21
【哈哈】“段子手”朱广权聊开学,手语老师:我太难了...

原标题:【哈哈】“段子手”朱广权聊开学,手语老师:我太难了... 又是一年开学季。 这几天, 各地的幼儿园、 小、中、大学纷纷开学。 央视“段子手”朱详情>>

阅读: 20
日期: 2019-09-02
kpl真奇葩:bp禁止动手机,暂停不准讲话,网友:论手语重要性

原标题:kpl真奇葩:bp禁止动手机,暂停不准讲话,网友:论手语重要性 KPL职业联赛对于我们普通玩家而言还是比较遥远的,虽然经常看KPL的比赛,但是有关于赛场上详情>>

阅读: 8
日期: 2019-08-29
天空,用手语怎么表示

小编为您搜罗的答案:一手伸食指,指尖向上,在头侧上方转动一圈。小编为您搜罗的答案:这里面有请学:http://video.baidu.com/v?ct=301989888&rn=20&p详情>>

阅读: 25
日期: 2018-08-22
手撕鬼子不是梦!懂“手语”的Hyperverse平台

详情>>

阅读: 27
日期: 2017-03-02
精彩推荐
相关专题