首页 > 技术

AI国家队真实力!科大讯飞多方言多语种技术助力虚拟数字人登上央视首届“科晚”

2024-12-30 18:14:04      西盟科技资讯   


  2024年12月29日,中央广播电视总台首届《中国科技创新盛典》(简称“科晚”)播出。作为总台继“春晚”后打造的又一创新品牌,这场以“新质生产力”为主题的科技盛宴汇聚了从高端装备、新能源汽车、人形机器人,到脑机接口、量子信息等多个前沿领域的重大突破。现场群英荟萃,中国工程院院士、“人造太阳”装置负责人李建刚,中国工程院院士、中国探月工程总设计师吴伟仁,中国科学院院士朱日祥、乔红等多位院士专家以及比亚迪集团董事长兼总裁王传福等产业界领袖轮番登台,通过科学演讲、科技成果大赏等多种形式,展现年度科技创新成果。在AI领域,人工智能国家队科大讯飞作为代表携多项AI技术创新成果亮相盛典。

  当晚,由讯飞智作打造的AI虚拟数字人令全场观众惊叹不已。这位虚拟数字人不仅能与真人主持人张腾岳进行自然流畅的互动,一分钟无缝切换用陕西、广东、河南三地方言完美演绎《静夜思》《王月怀远》《满江红》等经典诗词。字正腔圆,韵味十足,展现了AI驱动的虚拟数字人技术在多语言表达方面取得的突破性进展。

  据介绍,AI张腾岳融合了科大讯飞先进的语音合成、语音识别、语义理解、唇形预测、图像处理等人工智能技术,通过深度学习实现表情、动作的精准还原,配合先进的语音合成技术,使AI张腾岳具备自然的表情、流畅的动作和真实的声音表现。

  这一令人眼前一亮的表演,是科大讯飞深厚的多语种技术积累。在方言保护领域,科大讯飞自2017年启动AI+公益的“方言保护计划”,携手社会各界共建中国方言库。截至目前,该计划已实现202种方言的智能识别,让更多人能够通过智能设备实现家乡话交流。

  在2024年6月,科大讯飞作为第一完成单位的“多语种智能语音关键技术及产业化”项目获得2023年度国家科技进步一等奖。这是深度学习引发全球人工智能浪潮以来,过去十年人工智能领域的首个国家科技进步一等奖,标志着中国在多语种AI技术领域已达到国际领先水平。多年来,科大讯飞在多语种技术领域屡创佳绩:连续4届获得国际多通道语音分离识别比赛CHIME冠军,连续8届获得国际语音合成大赛Blizzard Challenge冠军;在国际低资源多语种语音识别竞赛中,斩获15个语种受限赛道和7个语种非受限赛道的冠军。

  值得一提的是,科大讯飞已围绕多语种智能语音技术构建起庞大的全球产业生态。秉持“技术顶天、应用立地”的战略,加速全球化布局:

  在智能终端领域,科大讯飞的多语种技术已支持各大手机厂商累计激活设备超10亿台,有效解决了华为等中国品牌出海的"卡脖子"问题。在智能汽车领域,车载智能化产品累计前装超5300万套,支持奇瑞、一汽、长安等车企超200万套订单成功出海。在智能硬件领域,科大讯飞开创了多个爆品类别,其中讯飞翻译机支持85个语种翻译,覆盖全球200多个国家和地区,连续8年获得京东618、连续8年获得天猫双11销售冠军。

  在全球化服务方面,科大讯飞的"多语种语音云"平台月服务量已突破5.46亿人次,年翻译服务51.5亿次,语音同传服务已覆盖全球50余个国家超4亿观众。这一技术实力已在北京冬奥会和冬残奥会、中国国际进口博览会、博鳌论坛等国家级重大活动中得到充分验证。而在企业级市场,讯飞听见系列产品已服务全球50多个国家和地区的40万场会议。

  科大讯飞构建的产业生态正在实现跨越式增长。2017年开始承建的智能语音国家新一代人工智能开放创新平台,已汇聚792.8万开发者,覆盖41.3亿终端设备,其中海外开发者超过40万。

  这些技术创新与产业布局正在创造显著的经济效益。近三年,科大讯飞的多语种智能语音技术产业化项目累计实现直接经济效益521.28亿元。同时,以科大讯飞为核心的"中国声谷"已上升为中部崛起的国家战略,由工信部和安徽省政府共建,正在形成新的产业集群。

  在今年的科大讯飞全球1024开发者节上,科大讯飞率先发布了超拟人数字人,仅需一张照片就能打造专属形象,口型、表情、动作均由大模型自动生成,能够精准匹配文本的意图,进一步降低了虚拟数字人的应用门槛。凭借业内领先的多语种多方言技术加持,这项数字人技术将为全球化市场带来更大发展空间。

  讯飞智作的视频配音、新闻视频、培训视频、广告视频也已经广泛应用于媒体、金融、智慧文旅、企业数字化、智慧政务、IP运营多个领域,并与学习强国、新华社、WAIC、中信银行、中国平安等单位建立合作。

  在全球元宇宙和数字经济加速发展的背景下,虚拟数字人市场迎来爆发期。科大讯飞凭借国家级技术背书、全球领先的多语种能力和成熟的产业生态,已在这一万亿级蓝海市场中占据独特优势。此次在央视“科晚”的惊艳亮相,不仅展现了中国AI的创新实力,更预示着科大讯飞有望引领全球数字人产业发展,开启商业化落地的新纪元。

相关阅读