张大妈

阿里开源语音识别王炸,支持 52 种语言和方言,吊打 Whisper!

源自知乎:章北海mlpy

02-07 11:51

阿里开源的Qwen3-ASR语音识别模型,以其对52种语言和方言的全面支持及强悍性能,为开发者带来了新的选择。它不仅解决了多语言环境下的语音转文字难题,更在处理带背景音乐的复杂音频上实现了突破,推理效率也远超同类方案。

阿里开源语音识别王炸,支持 52 种语言和方言,吊打 Whisper!智能速览

  • 支持多达52种语言和方言,覆盖22种中文方言。

  • 0.6B模型在128并发下,吞吐量高达2000。

  • 创新性支持带背景音乐的唱歌音频识别。

  • 实现流式与离线推理的统一,一个模型适配多种场景。

  • 获得vLLM原生支持,提供多种便捷的部署方式。

阿里开源语音识别王炸,支持 52 种语言和方言,吊打 Whisper!精华内容

要理解Qwen3-ASR的强大,需要深入其模型架构、性能表现和实际应用场景,看看它如何实现技术上的突破。

全能语言覆盖

Qwen3-ASR最突出的特点是它的广泛语言支持。模型能够识别30种国际主流语言,包括中、英、法、西、俄、日、韩等。更关键的是,它深入支持22种中国方言,从东北话到闽南语,覆盖了中国绝大部分地区,为国内开发者提供了极大便利。

极致推理效率

在性能方面,Qwen3-ASR表现出色。其0.6B模型实现了0.064的RTF(实时因子),意味着处理1秒音频仅需0.064秒。在128并发请求下,吞吐量可达2000,即每秒处理2000秒的音频。这一效率水平在同类开源方案中极具竞争力。

攻克复杂音频

识别带背景音乐的歌声是Qwen3-ASR的一大技术亮点。传统ASR模型通常难以处理此类复杂音频,但Qwen3-ASR通过大规模数据训练和强化学习方法,成功克服了背景音乐干扰,能够准确识别歌曲中的歌词内容,扩展了应用边界。

架构与部署便利

该模型基于Qwen3-Omni,采用创新的AuT(Audio Transformer)编码器。其统一推理架构意味着单个模型即可支持流式和离线两种模式,简化了开发流程。此外,官方提供vLLM Day-0支持和OpenAI SDK兼容,极大降低了部署门槛。

Qwen3-ASR的发布为开源语音识别领域树立了新标杆,其全面的语言支持和高效率使其成为开发者的有力工具,尤其在处理中文方言场景下优势明显。期待未来更轻量化的版本出现,让强大的语音能力触手可及。

内容由AI生成
0
扫一下,分享更方便,购买更轻松
0评论

当前文章无评论,是时候发表评论了
提示信息

取消
确认
评论举报

最新文章 热门文章