Apple Silicon 用户终于有了一个本地化的音频处理利器,15 个新模型覆盖 TTS/ASR/VAD,做语音应用或音频工具的开发者可以直接安装测试,尤其关注中文支持效果。
mlx-audio v0.4.4 发布,这是其功能最强大的版本,新增了 15 个 TTS、ASR 和 VAD 模型。新模型包括 VoxCPM2、Mega-ASR、Nemotron 3.5 ASR 等,支持 30 种语言、实时语音识别和长文本转录加速。服务器端新增 OpenAI 兼容格式和逐词时间戳功能,所有技术均运行在 Apple Silicon 上。该版本显著提升了 Apple 设备上的音频处理能力,适合开发者集成到本地应用中。
🚀 mlx-audio v0.4.4 已发布——这是我们迄今为止推出的功能最强大的版本。 新增了…
🚀 mlx-audio v0.4.4 已发布——这是我们迄今为止推出的功能最强大的版本。 新增了 15 个 TTS(文本转语音)、ASR(自动语音识别)及 VAD(语音活动检测)模型,提升了长文本内容转录的速度,并改进了与 OpenAI 兼容的音频服务器功能。所有这些技术都运行在 Apple Silicon 平台上。
🎤 新增的 TTS 语音引擎: • VoxCPM2(支持 2B 语言库、48kHz 音频格式、30 种语言) • MOSS-TTS / TTSD / 1.5 • Higgs Audio v3 • Miso、Dramabox、Irodori-TTS v3(VoiceDesign 技术支持)
📝 新增的 STT/ASR (语音转文本/自动语音识别)工具: • Mega-ASR(基于 Qwen3-ASR 1.7B 模型,支持 LoRA 路由技术) • Nemotron 3.5 ASR(支持实时语音识别功能) • granite-speech-4.1-2b-nar、Fun-ASR-Nano • Cohere ASR(长文本转录速度提升 1.7 倍)
🔊 新增的语音处理组件及编码器: • Silero VAD、FSMN-VAD、Step-Audio 2
⚙️ 服务器改进:新增了与 OpenAI 兼容的数据格式(response_format),支持 /v1/audio/voices 格式以及逐词时间戳功能;服务器端的语音活动检测功能已由 lllucas 完成开发。
安装方法:`uv pip install -U mlx-audio`
明天安装测试看看实际效果,对于中文的支持效果如何?