北京2022年冬奥会和冬残奥会不仅是各国健儿欢聚的运动盛会,也是一场科技赋能的智慧盛会为使更多人群感受到北京冬奥会的魅力,最近几天,在北京卫视《北京您早》节目中,冬奥手语播报数字人全新上岗,为听障人群带来亲切自然的冬奥手语播报服务
手语播报数字人有何技术优势数字人的手语播报怎样兼顾速度与准确性冬奥会结束后,这项技术还能在哪些场景应用9日,记者走进冬奥手语播报数字人研发企业之一智谱AI,在赛场之外,感受手语播报数字人的过人之处
快人一步:手语播报更迅速
全国第二次残疾人抽样调查数据显示,中国有超过2700万名残疾性听力障碍人士北京冬奥会是中国历史上首次举办冬奥会,听障人群也期待着深入了解比赛资讯,全面感受冬奥盛会
日前,采用超大规模智能信息模型和虚拟数字人技术,为听障人士打造的冬奥手语播报数字人正式亮相北京卫视,为观众带来冬奥期间赛事新闻的专业手语翻译播报。
智谱AI合伙人及高级副总裁左家平介绍,冬奥手语播报数字人系统以超大规模预训练模型为核心技术,自主搭建多模态肢体动作,表情,手指同步采集系统,运用跨模态拟人生成算法,超高精度写实数字人等行业领先技术,实现冬奥期间赛事新闻的专业手语翻译播报。冬奥会转播将增加手语转播机器人。
与传统的人工手语播报相比,数字人播报有何优势智谱AI首席技术官张鹏表示,手语播报数字人最大的优势是这是一套自动系统,不需要人工过多干预,可大量节省人力同时,系统的运行速度接近实时,因此在呈现手语播报效果时,比传统的人工播报要快
学识渊博:语料储备更丰富
2018年,《国家通用手语常用词表》和《国家通用盲文方案》作为语言文字规范正式发布。北京冬奥会举办时,聋人将享受到基于人工智能技术的精准手语播报服务。
为推广和普及国家通用手语,冬奥手语播报数字人系统完成了《国家通用手语词典》收录的8214条通用手语的采集和录制,并且语法都以听障群体习惯打法为准,以确保手语播报成果的准确性和专业度,更好服务听障人群。
由于当前中国缺少较完善的手语语料数据,系统研发人员在北京市残疾人联合会和市残联聋人协会的支持下,邀请超过40位聋人老师及手语专家进行手语文本转写和技术指导,并进行大范围听障群体评测,最终构建了符合国家通用手语规范的国内最大规模多模态手语语料库,词汇及语句总规模超10万。昨日,将在北京冬奥会期间正式投入使用的手语播报数字人,在中关村论坛“人工智能与多学科协同创新论坛”上提前亮相。
精准翻译:播报方式更智能
张鹏表示,与传统的语音AI播报相比,冬奥手语播报数字人的最大区别是表意的准确性和表达的可懂度:语音播报的技术特点主要集中在对语音的理解上,而面对听障人士,手语播报还需要用具有韵律感的手势,丰富甚至有些夸张的表情来提升播报的可懂度。。
听懂语音后,数字人如何将文字用手语更准确地表达出来据介绍,为构建能理解,翻译语音和手语的智能数字大脑,冬奥手语播报数字人系统以超大规模预训练模型为核心技术,通过语义蒸馏及手语翻译快编模型,将新闻播报语音蒸馏成语义高度接近的手语文字,并翻译成符合手语习惯的语序最终,手语数字脑可以通过计算机模仿听障人士的大脑,进行手语播报驱动
此外,为实现高精度,高自然度的人物形象和手语动作姿态,研发团队还自主搭建了多模态肢体动作,表情,手指同步采集系统通过肌肉绑定技术驱动实现面部采集,结合业内领先的语音识别及高清视频合成等技术,呈现给听障人群亲切自然的冬奥手语播报服务
便利生活:应用场景更广泛
目前,冬奥手语播报数字人正在北京卫视《北京您早》节目中对冬奥赛事集锦和一起看冬奥进行手语播报,手语信息播报服务降低了冬奥节目的运营成本,也便捷了听障人士收看赛事报道的途径。
未来,手语播报数字人有望在机场,车站,银行等公共场所落地,方便听障人士生活此外,手语播报数字人的应用还将助力国家通用手语推广,推动国家通用手语标准普及,为残疾人平等参与社会生活创造无障碍环境,让科技更有温度
根据消息显示,冬奥手语播报数字人由北京市科委,中关村管委会支持,智谱AI,凌云光和北京广播电视台联合打造,清华大学贾珈教授团队和中科院计算所陈益强研究员团队参与了相关关键技术的研究和开发,项目还得到了北京市残疾人联合会和市残联聋人协会的帮助和支持。
。声明:本网转发此文章,旨在为读者提供更多信息资讯,所涉内容不构成投资、消费建议。文章事实如有疑问,请与有关方核实,文章观点非本网观点,仅供读者参考。
乒乓球比赛中应对长胶选手的七种办法
打羽毛球的四大常见误区
篮球新手怎么样快速入门成为业余高手?
国内首款民用北斗产品:苏宁众筹 推出 北斗盒子民用通信终端 筹款项目
Pro Trek 终于加入心率监测功能!卡西欧 WSD-F21HR 智能腕表能否成为都市训练的新新力量?
为什么说羽毛球是“运动之王”?
北京冬奥组委:北京冬奥会奖牌实现体现
不怕摔的邱冷站上冬奥决赛场
U21国青队虎年首训开始没有高水平热
中国单板滑雪“三朵金花”闯入决赛
北京冬奥比赛用雪不靠天吃饭不同比赛用
桂声网评:激扬冰雪世界的青春力量
许静韬说凌智传授了比赛经验
拉科塞维奇当选CBA第三期月度最佳防
马秀玥说目标是前六
谷爱凌:敢于挑战与突破的你最美
谷爱凌和她的澳洲闺蜜:相互支持、各自
“铿锵玫瑰”精神是不言弃,想追赶欧美
西班牙滑雪运动员中英文致谢中国网友:
“两金王”任子威晋级男子1500米半
加拿大运动员晒超燃画面:我戴五环在中
巴西南美侨报网:46岁越野滑雪老将北
瞒着家人“憋大招”北京冬奥开幕短片中
金和晓:在无雪的香港圆冰雪梦
盘一盘冬奥会上的中国风,一整个自豪住
冬奥定制版冰墩墩不对外销售
晚上起过夜的同学都知道,钻被窝很容易,但迫不得已要...
Leatherman(莱泽曼)主要是生产多功能工具...
当谈及帐篷,随着制造的发展,近年来似乎那些传统的拉...
“装备,就等于生命!”这是中国登山队副队长次落曾经...
黑龙江省体育局13日发布消息,北京时间12月13日...
遗憾这个词可以说,后悔这个词不要说。因为你每天已经...
中国篮协官网透露,2021全国男子三人篮球超级联赛...
12月10日下午,正在广东清远接受21天隔离的中国...