时间:2023-02-05 20:02:05 | 浏览:649
澎湃新闻记者 程婷
“运动员要从一个近50米高的斜坡上下滑,顺滑、倒滑都可以选择,然后在斜坡的尽头腾跃,完成空翻、转体、抓板等技术动作组合……”
电视画面中,当主持人用较快的语速介绍冬奥会自由式滑雪大跳台项目时,画面左下角的红衣年轻女士手口并用,快速将这些内容以手语表达了出来。
2月5日以来,看过北京卫视《北京您早》节目的人可能见过上述这一幕。但很多可能不知道,电视画面中的女手语播报员不是真人,而是“冬奥手语播报数字人”。
据智谱AI CTO张鹏介绍,“冬奥手语播报数字人”的最大优点是,它是一套自动系统,可以大量节省人工;同时,它可以流畅地将语音播报生成为手语播报,堪比真人。
目前,“冬奥手语播报数字人”的语义表达完整性已较高,其手语表达的90%的内容听障人士与手语老师可懂。
“冬奥手语播报数字人”手语播报冬奥新闻画面。 项目研发方供图
国内最大规模多模态手语库作支撑
2022年北京冬奥会不仅是一场全世界奥运健儿与嘉宾欢聚的盛会,也是一场科技赋能的“智慧”盛会。
“冬奥手语播报数字人”采用了我国首个超大规模智能信息模型和虚拟数字人技术,由北京市科委、中关村管委会支持,智谱AI、凌云光和北京广播电视台联合为听障人士打造,清华大学贾珈教授团队和中科院计算所陈益强研究员团队也参与了相关关键技术的研究和开发。
该其系统以超大规模预训练模型为核心技术,自主搭建有多模态肢体动作、表情、手指同步采集系统,运用跨模态拟人生成算法、超高精度写实数字人等行业领先技术,实现了冬奥期间赛事新闻的专业手语翻译播报。
张鹏告诉澎湃新闻记者,像“普通话”一样,有通用手语,但也有类似方言的不同手语表达形式。因此,需要采集足够多的语料,才能让“冬奥手语播报数字人”能够准确表达不同场景下的内容的语义。
对此,“冬奥手语播报数字人”系统完成了《国家通用手语词典》收录的8214条通用手语的采集和录制,并且语法都以听障群体习惯打法为准,以确保手语播报成果的准确性和专业度。
据智谱AI合伙人、高级副总裁左家平介绍,由于当前国内缺少较完善的手语语料数据,研发人员在北京市残疾人联合会和市残联聋人协会的支持下,邀请超过40余位聋人老师及手语专家进行了手语文本转写和技术指导,并进行大范围听障群体评测,最终构建了符合国家通用手语规范的国内最大规模多模态手语语料库,词汇及语句总规模超10万。
张鹏表示,目前“冬奥手语播报数字人”的语义表达完整性已较高,就听障人士与手语老师的反馈来看,其表达的可懂度达90%。
左家平介绍“冬奥手语播报数字人”相关情况。 澎湃新闻记者 程婷 图
“智能数字脑”助力流畅、快速手语播报
电视中,“冬奥手语播报数字人”之所以能快速自如地将语音播报转换成手语,是因为研发人员已经克服了重重难关。
张鹏说,手语除了有“方言”与“普通话”外,其表达中诸如语序等一些规则和语音表达规则也不太相同。因此,“冬奥手语播报数字人”将语音转化成手语时,需要自动学习进行语序调整。
“新闻主播的语速通常是每分钟两百多不到三百字,手语表达达不到那么快的语速,但必须要能在正常合理的时间内把主要意思表达出来。这样,由语音播报转手语时,不能完完整整的逐字逐句的去翻译,需要动态去精简一些内容。”张鹏表示,这是一个难题,需要算法反复地去学习、调优。
为构建能够理解、翻译语音和手语的智能数字大脑,“冬奥手语播报数字人”系统以超大规模预训练模型为核心技术,通过语义蒸馏及手语翻译快编模型,实现新闻播报语音蒸馏成语义高度接近的手语文字,并翻译成符合手语习惯的语序。最终,手语数字脑可以通过计算机模仿听障人士的大脑,进行手语播报驱动。
此外,要让数字人展现出高精度、高自然度的人物形象和手语动作姿态,也是一件难事。
为此,研发团队自主搭建了多模态肢体动作、表情、手指同步采集系统。通过采集多模态动作捕捉数据,运用跨模态拟人生成算法对超写实数字人进行自然、流畅的驱动和渲染,实现对文本内容的手语播报。
其中,通过肌肉绑定技术驱动实现面部采集,结合业内领先的语音识别及高清视频合成等技术,呈现给听障人群亲切自然的冬奥手语播报服务。
“冬奥手语播报数字人”。项目研发方供图
与“虚拟AI主播”有何不同?
新亮相的“冬奥手语播报数字人”与常见的“AI虚拟主播”有何不同?
中科院计算机所所务委员、泛在中心主任陈益强向澎湃新闻记者表示,“虚拟主播”与“冬奥手语播报数字人”,身上都用到了虚拟人相关的技术,都追求形象的流畅性。
双方最大的区别在于:一般而言,AI主播动作比较自然即可;手语播报数字人则需要通过手势动作来实现表意的准确性和可懂度。
另外,传统的AI模型主要是进行语音播报,基本不存在可懂度的问题;但AI手语人存在手语打得是否可懂的问题,它需要用丰富的、夸张的表情来提高手语的可懂度。
张鹏表示,手语播报数字人的应用场景广泛,可以为新闻媒体提供全流程智能化的数字人手语生成服务,也可将声音广播内容转化为手语,以便听障人士可及时获取冬奥会赛事相关信息。
此外,推广手语播报数字人可加速国家通用手语推广落地,推动国家通用手语标准普及,为残疾人平等参与社会生活创造无障碍环境。
责任编辑:腾飞
校对:丁晓
梦若神机(49万)粉丝:下午有望反转,持股不动凸教授归来(53.3万)粉丝:震荡回调不惧,坚定看涨来自股市的猩猩(54.9万)粉丝:权重股明显下跌,可能震仓洗盘股侠钟超(68.8万)粉丝:未收评稀豹(39万)粉丝:下午或收中阳线看反弹以上就是大V们的个人看法,可以说明大盘的高位线始终没有明显突破的进展,似乎还在进行震荡平稳走势,尽管金融券商或者新能源等相继几日的暴涨依然没有上升,主力资金可能在进行压制目的就是困惑散户,等散户们觉得无望大涨了再进行拉高。
大盘分析指数意外的连续走强,昨天领涨的创业板全天再涨17%,收盘成功突破30日线阻力。明天市场要震荡开始争夺3300这个压力位了,接下来就是看成交量以及券商能否继续发力。如果能突破的话,那接下来一段时间还会走出反弹行情,如果不行的话,估计就是回调了,不过也顶多是回踩后再反弹,最终的都是反弹,只是过程要曲折点罢了。
Wind数据显示,截至2022年6月底,“固收”基金(按过去的计算方式,包括混合型一级债、混合型二级债、偏债混合型基金、可转债基金)的合计规模近25万亿元,而在2019年底,这一数字还不足万亿。其中,偏债混合型基金、二级债基就是这类产品最常见的基金类型。
作为资深投资人,赛富亚洲投资基金创始管理合伙人阎焱表示,大变局下投资应该考虑的首要因素是风控,而不是回报,投资人需要降低投资回报的预期,把目光聚焦至从0到1的颠覆性原创技术。在我看来,风险投资的周期和宏观经济的周期不是一致的。
想变富,转思路:普通人致富的5大“生财秘诀”,助你告别贫穷当下这个时代,相信绝大部分的人感受就是钱难赚、钱不够用、钱不经花。说白了,作为普通人,要想变富首先必须改变思路。第五条:结交富人要想成为有钱人,就得靠近他们,把他们身上的优秀品质搬到自己身上来。
加了约2%的53度飞天茅台酒的78g装茅台冰淇淋,售价59-66元,是茅台有史以来首次以“茅台”命名的非酒类食品产品。与微不足道的利润相比,茅台真正看中的是这些吃冰淇淋的年轻人。“i茅台”的运营模式,将经销商纳入整个服务流程,然后缩短渠道距离实现成本优化,提升代理渠道端的利润,还能进一步提升企业的渠道掌控力,与消费者展开更直接的互动交流。
8月3日,贵州茅台酒股份有限公司(以下简称“贵州茅台”)(600519)发布《2022年半年度报告》显示,今年上半年实现营业收入57617亿元,同比提升1738%;从废除拆箱令到推出12箱装产品,从“i茅台”APP研发上线到茅台冰淇淋点燃夏日,在丁雄军接任近一年的时间里,稳价、年轻化两手抓。
茅台转变经营模式顺应了市场经济的市场机制,十八届三中全会上让市场经济占主导地位成为现在人们热议的话题。而在2021年半年报中出现了一个重要的“变量”:国内经销商为2096家,新增62家,减少12家,累计增加50。
白酒的特质,越陈越香。酱香酒更是如此。大量茅台酒被储存下来,一年,三年,五年,十年,二十年,市场上的酒越来越多。所以,归根结底,茅台虚高不虚高,在于利润能不能翻番甚至翻两番。你没看到的是,茅台以价格违规等理由,已经砍掉超过三分之一经销商了,省出来的这三分之一的份额。
市第十二次党代会以来的五年,是南宁发展历史上具有里程碑意义的五年。一张长图告诉你,南宁这五年的变化↓来源|南宁云、南宁新闻网编辑:邓玲校对:唐艺文责编:覃凤妮值班编审:卢超扫描二维码进入南宁云客户端南宁权威新闻资讯第一时间获取扫描二维码关注南宁新闻网微信公众号最新最快信息实时掌握南宁新闻网官方抖音号(nnnews)与您一座城、一条心,请关注我们,了解更多南宁大事小事,小新在抖音等着你哦!