OpenBMB· @OpenBMB · X·· 14 天前AI 评分
OpenBMB 介绍基于 VoxCPM2 的开源同传系统 VoxWeft
开发者 @HenryZ30734018 基于 VoxCPM2 的 MLX 实现构建了开源同传系统 VoxWeft,可在 Apple Silicon 上端侧把实时语音转成译文语音,保持音频私密与低延迟。VoxCPM2 在 M5 MacBook 上约 170 ms 输出首段音频,支持 30 种语言直接语对翻译,可用约 5 秒参考音频克隆目标音色,并以 4-bit 量化在 MLX 上运行。
🎙️ 实时同传,由 VoxCPM2 本地驱动。
开发者 @HenryZ30734018 打造了 VoxWeft,一个面向 Apple Silicon 的开源同声传译系统。它采用 VoxCPM2 的 MLX 实现,将实时语音在设备端直接转译为译文语音,既保障音频隐私,又保证响应速度。
✨ 亮点:
⚡ VoxCPM2 在 M5 MacBook 上约 170 毫秒内即可流出首段音频
🌍 支持 30 种语言的语音生成,可直接进行语言对互译,无需中转语言
🗣️ 仅需约 5 种参考音频即可克隆目标音色,让译文语音保持一致
💻 在 MLX 上以 4-bit 量化运行,使 Apple Silicon 上的低延迟本地语音生成成为现实
VoxWeft 展示了 VoxCPM2 如何成为完整实时应用的语音层:不只是生成音频,更实现了全程留在设备端的私密多语言交互。
试用 VoxCPM2,看看你能用它构建什么!
🔗GitHub:github.com/HenryZ838978/VoxW… 🔗Devlog:github.com/HenryZ838978/VoxW…
🤗 VoxCPM2:huggingface.co/openbmb/VoxCP…
来源:OpenBMB · x.com