Skip to main content
 首页 » 探索

人才能完成打破科大讯飞语晋级,声响音组成技能复刻与超拟

2025-07-04 11:07:0837928

6 月 26 日,讯飞科大讯飞语音组成技能全新晋级 ,语音一句话声响复刻与超拟人组成两大中心才能完成打破。组成据专业测评显现 ,技能晋级科大讯飞一句话声响复刻技能在类似度、声响准确度等维度职业抢先 。复刻

讯飞星火 App 的超拟成打“一句话声响复刻”功用自 2024 年 4 月上线以来 ,备受用户和职业认可 。讯飞在智能语音范畴 ,语音声响复刻作用的组成中心目标一直环绕类似度与准确度两大维度打开。类似度决议“榜首耳形象” ,技能晋级包括音色特质及风格神韵;准确度则关乎声响复刻是声响否好用,保证发音规范  、复刻中止天然、超拟成打口气连接 。讯飞

此次讯飞技能打破的要害  ,除了星火语音大模型底座的根底和继续迭代,还构建了一套三阶段层次化语音建模结构。首要  ,经过星火底座大模型准确捕捉发音规则和韵律特征 。其次,在音色康复阶段解耦并重构声学特征 。最终 ,经过高精度声码器康复高保真波形。

这套语音建模结构打破了语义表征,选用 mel VQ-AE 模型结合语音自监督预练习编码器,并引进音色最小互信息束缚 ,成功解耦出音色无关的离散语义 token。这种结构完成了发音内容与音色特征的可控别离 ,也明显提高了语义 LLM 的建模稳定性。

在音色解耦表征才能的根底上,科大讯飞在声响复刻场景针对性进行两项要害技能的测验与打破 :音色编码增强 —— 在声学模型中立异性地交融大局声纹嵌入与部分帧级音色编码,提取细粒度音色特征 ,并构建声纹空间语义一致性丢失函数,明显提高音色康复的类似度 。强化学习 —— 经过语音鲁棒性点评模型和人工标示构建偏好数据集,选用根据 DPO 的强化学习战略,大幅提高组成语音的稳定性和天然流通度 。只需一句话录音,AI 就能完好捕捉用户喉腔共识 、口音特色 、气味流通等发音特征 ,精准复原用户的中止习气 、情感崎岖和呼吸节奏,到达真人难以区别的复刻作用 。

从从前要录上数十个小时的语音资料 ,到录入几段话,再到现在仅用一句话就能复刻声响  ,语音组成技能一直在向更快、更好 、更易用的方向奔驰。一句话复刻技能的进阶,代表着能用更少的资源 、更快的速度带来冷艳且有用的作用 ,明显降低了运用门槛 ,在 AI 赋能千行百业的大布景下,让更多的场景和职业衍生出更多的特性化需求 ,打破并得到完成。

在需求深化沟通的场景里,仅有类似音色并不满足 。讯飞的超拟人组成技能此次进阶的重点是赋予 AI 声响以“上下文情商”  。面临多轮对话的复杂度,科大讯飞开发了上下文感知的语音生成体系 。该体系交融前史文本及对应音频特征,经过跨模态编码器剖析上下文 ,让 AI 声响能像真人一般敏锐呼应心情改变和论题转化 。在真人与 AI 声响的对话测验中,跟着论题和心情改变 ,组成声响的口气会实时调整 ,给出恰如其分的情感回应 ,全体天然度挨近真人水平 。

AI 语音技能落地最明显的范畴当属智能轿车座舱 。今年初 ,蔚来在“Banyan 榕 3.1.0 版别”中为 NOMI 帮手引进的超拟人情感音色  ,正源于讯飞的深度赋能  。搭载该技能的蔚来新车型(如 ET9、新 ES6 / EC6 / ET5 系列等) ,成为职业首款运用 AI 生成式语音组成结构的车型  。除蔚来外,奇瑞、广汽、长城、日产、本田等干流车企相同挑选了讯飞超拟人技能,重塑车内智能沟通体会 。

讯飞语音技能的辐射规模远不止车载场景。在教育范畴,星火大模型赋能的 AI 学习机已能像真人教师般展开多轮对话诊断学情 ,为学生定制特性化学习途径  。2025 年暑期晋级中 ,学习机新增的“AI 1 对 1 互动式问诊规划”功用,经过几轮对话即可剖析常识掌握情况 ,结合学生才能层级生成精准学习计划 。

在数字内容创造范畴 ,讯飞智作渠道的超拟人数字人技能完成“一张相片 + 一句话录音”定制专属虚拟人 ,其唇形同步率高达 98%。该技能已协助天津大学教师打造慕课个人 IP,简化教育视频制造流程。医疗场景中,搭载情感组成技能的导诊机器人运用方言与晚年患者沟通时,对话天然度提高 200% 。跟着星火语音大模型在教育、医疗、金融等范畴的深度浸透 ,其技能底座已服务全国 5 万余所校园 、600 家医院及很多金融机构 。

科大讯飞研究院院长刘聪表明:“咱们期望声响不止于东西 ,更成为承载情感与特性的新维度,赋能更多场景职业、催生更多或许” 。归于 AI 声响的多元化 、情感化年代 ,正加快驶入实际。

广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码 、口令等方式) ,用于传递更多信息 ,节约甄选时刻 ,成果仅供参考,一切文章均包括本声明。

评论列表暂无评论
发表评论