搜狗发布全球首个手语AI合成主播
5月17日,搜狐科技5G & AI峰会在北京举行,搜狗CEO王小川应邀出席发表主题演讲。活动中,王小川正式发布最新一代搜狗AI合成主播——全球首个手语AI合成主播“小聪”,基于搜狗领先的人工智能和AI分身技术,以“黑科技”的力量帮助听障人士更好融入社会,更好享受数字化生活。
技术突破解决听障难题
根据世界卫生组织发布的数据,全球听力障碍人群高达4.66亿,在我国则有2700万人。因无法常态化、高质量地接受资讯信息,很多听障人士难以融入社会,最终成为被遗忘和边缘化群体。
目前,在以电脑、手机为载体的各类新闻资讯、文娱节目中,引入手语协助的少之又少。即使有能力的电视节目提供手语解说时,也多以正常语序编排,很少照顾到手语的特殊表达结构,造成绝大部分听障者只能理解不足60% 的内容。因此,通过技术创新实现听障人士真正可懂的手语播报能力,对于帮助听障者克服沟通障碍,更好融入社会非常有价值。
“小聪”以打造听障人士真正可懂的通用手语播报为目标,立足于搜狗领先的数字人技术体系——搜狗分身,集成了超写实3D数字人建模、机器翻译、多模态数字人生成、迁移学习、实时面部动作生成及驱动等多项领先AI技术,实现了超写实3D数字人自然可懂的手语主播能力,使机器可以基于输入口语文本生成逼真度高、手语表达准确的3D数字人视频内容,从而具备“超写实的逼真数字人效果”、“高可懂度的手语表达能力”、“高接受度的手语展现效果”三大特点。
三大优势凸显“小聪”能力超群
数字人效果方面,“小聪”使用了行业最领先的3D重光照扫描还原、面部肌肉驱动、表情肢体手势捕捉技术,生产出了高度还原真人发肤、形象逼真、动作自然生动的数字人模型,数字人写实度的大幅突破则能够显著提升手语播报的真实感与亲切感,从而提高播报用户体验。
手语表达方面,“小聪”基于《国家通用手语词典》,能够实现健听人语言与听障者手语语言的机器翻译能力,基于输入的健听人语言能够低延迟生成高准确率的手语语言表征,通过搜狗分身的多模态生成技术,实时预测生成对应的超写实3D数字人驱动参数,进而快速生成数字人手语播报视频,在测评中可懂度可以达到85%以上,能有效帮助听障者克服理解障碍,达成信息有效传递。
手语展现方面,“小聪”可以完整实现手控信息及非手控信息的表达,通过机器翻译生成手语表征信息,覆盖手部动作、面部表情、口动唇动等多个维度,并基于搜狗多模态端到端生成模型进行联合建模及预测,生成高准确率的动作、表情、唇动等序列,从而达成自然、地道、接受度更高的手语表达效果。
在此过程中,“小聪”还运用了业内领先的搜狗SLMT(Sign Langure Machine Translation)技术,在输出符合听障人士习惯自然手语的基础上,进一步提高了手语的可懂度、丰富和逼真了AI合成主播的表情与唇动能力,除了可以解决听障人士在日常生活、公共服务、特殊教育等多个场景下的信息不畅问题,还可以快速生成、批量复制,全年无休、随时随地提供服务。
赋能于人彰显社会责任
作为AI合成主播的开创者,搜狗分身一直是行业发展的风向标,也始终站在业内最前沿,而搜狗分身之所以能够“引领”行业,得益于搜狗高度的社会责任感,以及搜狗AI“赋能于人”的发展理念。
自2018年发布全球首个AI合成主播至今,搜狗分身始终在坚定践行“以人为本,为人赋能”,而“小聪”的诞生,既是搜狗分身技术的再一次迭代突破,又是搜狗聚焦更加需要帮助的听障特殊人群,将“以人为本,赋能于人”贯彻得更加彻底、更有温度的体现,同时也充分彰显了搜狗的社会责任感和企业担当。
作为全球首个手语AI合成主播,“小聪”能够帮助广大听障人士更好地接收资讯、更好地生活,更好地“看”世界,而从更高维度来看,它的广泛运用不仅可以造福国内听障人士,甚至可以走出国门、造福全球,彰显中国“智”力。
【来源:Techweb】【作者:TechWeb.com.cn】
Windows非典型失败产品归来自己玩吧WindowsMediaCenter媒体中心绝对算不上微软成功的产品,Windows10开始就放弃了它,但也说不上很失败,至今仍有很多人对它念念不忘。曾在微软任职2014年离开的C
微软正式淘汰32位Windows10OEM必须预装64位版本时至今日,无论桌面平台还是移动平台,无论硬件还是系统软件,64位早已是绝对主流。微软也终于向32位的Windows10下手了。随着Windows10v2004五月更新正式版的出炉,
王者荣耀上架程序员皮肤太现实了伴随着万物有灵新版本的到来,S15新赛季即将拉开帷幕,荣耀战令也将迎来全新赛季的更新或调整。当然,其中少不了的就是召唤师们非常关心的全新战令限定皮肤啦!其中,战令限定皮肤典韦蓝屏警
虚幻4引擎展现极限画质这不就是照片嘛凭借出色的渲染质量高度的易用性流水线的灵活性,虚幻4是当今最流行的游戏引擎之一,也有用极深的潜力。游戏工作室DekogonStudios最近就放出了一组利用虚幻4引擎打造的渲染图,
良心!口碑最好沙盒游戏更新Switch专享近日,任天堂官方发布公告,确认Switch版我的世界将在6月21日免费升级至Bedrock(基岩)版本。本次升级能够将各平台数据互通,包括XboxOneWindows10Andro
终于来了!Redmi手机官宣MIUI12稳定版明日首次推送6月27日消息,Redmi红米手机官方宣布,MIUI12稳定版将于明日(6月27日)进行首次推送。Redmi手机部分机型也将首批推送MIUI12。不过,官方并未透露首批推送MIUI
PC大作只狼A卡神油来了必升!此前在3月15日,趁着微软为Windows7带来了DX12游戏支持,AMD发布了显卡驱动RadeonSoftwareAdrenalin2019Edition19。3。2,改善了DX
前暴雪成员开发漫威游戏Kotaku的资深舅舅报道说,由前炉石执行制作人朱仲英(HamiltonChu)领衔的SecondDinner工作室正与漫威合作,开发一款漫画改编游戏。该工作室规模很小,但骨干成员
2。33G独步天下索尼PS5主机有AMD鸡血优化在微软XboxSeriesX(简称XSX)与索尼PS5主机的竞争中,PS5的纸面规格除了5。5GBs的SSD硬盘之外全面落败,尤其是GPU比PS5差距较大。不过PS5的GPU频率高
PS5来了!索尼CEO官宣新一代游戏主机据FinancialTimes报道,索尼新任总裁兼CEOKenichiroYoshida(吉田宪一郎)在接受采访时表示,就目前而言,我能告诉大家的是,确实有必要去开发下一代主机硬件
华为3D模术师正式上线!这玩法绝了这一代Mate20Pro除了搭载全新一代徕卡三摄外,还提供了前置2400万像素3D深度感知摄像头,并配合强大的AI算法与算力,首次实现了3D仿生成像3DQmoji表情以及AR手势游