AI语音模型在落地应用中遭遇噪声、方言、响应延迟等深水区难题。通义语音模型双子星——FunASR与FunCosyVoice 3全面升级,通过在抗噪、方言识别、实时交互和语音合成等方面的技术突破,为行业提供了高精度、低成本且性能强大的解决方案,正推动AI大模型真正“声”临其境。
智能速览
FunASR在嘈杂环境下识别准确率高达93%。
全面支持7种中文方言与31种语言混说识别。
FunCosyVoice 3实现中英混读错误率降低56.4%。
语音合成支持情感指令控制,输出更具表现力。
同步开源轻量级模型,降低行业应用门槛。
精华内容
面对复杂现实场景,AI语音模型需要成为全能的“六边形战士”。通义此次升级,正是对准了行业痛点,从输入识别到输出合成进行了全方位的强化。
强化输入识别
在复杂场景下,语音识别的鲁棒性至关重要。FunASR在会议室、地铁等高噪声环境下,将识别准确率提升至93%,让AI在嘈杂环境中也能有效工作。
模型还新增了对歌曲、说唱等特殊音源的识别能力,并优化了音乐背景下的语音表现。针对方言和国际化需求,它全面支持7种中文方言及31种语言的自由混说识别,覆盖了广阔的应用场景。
针对金融、医疗等专业领域,FunASR将定制化热词容量提升至1万条,且不损伤通用识别效果,解决了专业术语识别的难题。毫秒级的流式识别响应,也为实时字幕和同声传译铺平了道路。
优化语音合成
如果说FunASR解决了“听”的问题,FunCosyVoice 3则致力于让AI“说”得更像真人。此次升级,其语音合成首包延迟降低50%,支持双向流式合成,实现输入即发声,极大提升了交互的流畅感。
在中英文混合朗读的场景下,模型的发音错误率降低了56.4%,即便包含专业术语也能精准表达。音色克隆在内容一致性与相似度上都有显著提升,结合对100多种音色、9大语种及18种方言口音的支持,应用空间广阔。
更具突破性的是,新增了情感指令和场景控制功能,AI合成的语音可以携带开心、悲伤等情绪,为有声内容创作和交互叙事提供了新的可能。
开源与生态
此次升级同步开源了FunCosyVoice 3 0.5B和FunASR 0.8B两大轻量级模型。这些模型保留了核心能力,如Zero-shot音色克隆和多语言支持,但参数量更小,便于开发者和中小企业进行本地化部署与二次开发。
这种“商业+开源”的双轨驱动策略,是阿里云一贯的技术生态战略的延续。通过开放核心能力,降低了整个行业应用顶尖语音技术的门槛,有望催生出更多创新应用,共同推动AI语音技术向前发展。
通义语音双子星的升级,精准回应了市场对高性能、低成本语音技术的迫切需求,从技术细节上展现了AI在解决现实复杂性方面的巨大进步。通过开源战略,其价值不仅限于商业产品,更在于赋能整个行业生态。未来,期待更多玩家加入,共同探索AI语音的无限可能。
关键评论
抗噪能力拉满,嘈杂环境也能精准识别语音。
懂方言的AI语音,对下沉市场来说太重要了。
成本和性能兼顾,这波升级太懂行业痛点了。