做播客要克隆自己的声音、做有声书要批量生成配音、剪视频要配多语言音轨——这类需求过去基本只有两条路:要么把音频上传到 ElevenLabs 这类云端服务,按字符计费还要担心数据安全;要么自己东拼西凑一堆开源模型,配环境配到怀疑人生。现在有了第三个选择:VoiceStudio,一个完全本地运行的开源语音工作室,GitHub 上一度单日涨了三千多个星。

它能做什么

VoiceStudio 的官方定位很直接:开源的、完全本地的 ElevenLabs 替代品。ElevenLabs 有的核心能力,它基本都给了对应的开源实现:

  • 语音克隆:提供一段干净的参考录音,输入文本即可生成同款音色的语音;
  • 音色设计:用文字描述想要的声音(比如"沉稳的男中音、语速偏慢"),直接凭空生成;
  • 视频配音:支持带时间轴的语音视频配音,适合给视频配多语言音轨;
  • 听写与转录:浮动小组件随时听写,也可批量转录音频;
  • 有声书创作:支持故事、有声书及批处理作业,长内容一次跑完;
  • 本地模型管理:在应用内直接安装、管理语音模型。

支持的语言数量是它最扎眼的数字之一:646 种。默认引擎为 k2-fsa 的 OmniVoice,也可以按需切换其他引擎。

"完全本地"不是营销词

VoiceStudio 的本地优先架构做得比较彻底:模型下载完成后推理完全离线;语音数据不需要上传任何云端服务器,对隐私敏感的场景(企业内部培训素材、个人声音资产、未发布内容)相当友好。社区声音画廊这类联网模块也只在打开时联网,其余全部走缓存。

对想把它接进自动化流程的开发者,它提供本地 API 和 MCP 接口,可以直接挂到 Claude Code、Cursor 等 AI 编程工具下面当"嘴巴"用;还有一个可选的远程 GPU 工作节点功能——通过 gRPC 协议把任务发给局域网内其他有显卡的机器,默认关闭,关闭时不监听任何端口。

门槛有多低

  • 安装:macOS 和 Linux 一行脚本安装(官方提供 voicestudio.sh 安装器),也有 Windows、Docker 安装指南;
  • 硬件:NVIDIA 显卡走 CUDA 加速,Apple Silicon 走 Metal/MPS 加速;没有独显也能用——纯 CPU 运行,只是速度慢一些(需约 5GB 磁盘装 CPU 版 PyTorch)。老笔记本跑起来也不算夸张;
  • 协议:AGPL-3.0 开源,注意模型有各自独立的许可证,商用前需要逐一确认。

谁适合用

  • 播客与有声内容创作者:批量生成配音、制作有声书,省掉按字符计费的云端账单;
  • 视频创作者:多语言配音、口播替代,素材不出本机;
  • 独立开发者:想要一个可自托管、可编程的语音合成服务,直接用它的本地 API/MCP 接到自己的应用或 Agent 工作流里;
  • 对数据敏感的团队:内部培训视频配音、客服话术生成等不想让音频出内网的场景。

一句话总结:如果你的语音需求离不开克隆、配音、转录、有声书这几件事,又不想把声音数据交给云端,VoiceStudio 值得先装来试试。它证明了"本地优先"的 AI 语音工具已经可以做到功能对齐商业云服务的程度。

来源:GitHub debpalash/VoiceStudio 项目主页及官方文档