VoiceStudio:7 万 star 的本机版 ElevenLabs——语音克隆、视频配音、有声书,全在自己电脑上跑

数据引自官方 README 及 2026-10-19 的公开评测(见文末链接)

一句话: 开源桌面应用(AGPL-3.0),把语音克隆、语音设计、视频配音、转写、有声书打包成一站式本地工作流——无账号、无 API key、无按字符计费,自己电脑就是配音棚。

开源桌面应用(AGPL-3.0),把语音克隆、语音设计、视频配音、转写、有声书打包成一站式本地工作流——无账号、无 API key、无按字符计费,自己电脑就是配音棚。

痛点:ElevenLabs 的账单和云端

用过 ElevenLabs 的人都懂:按字符计费,免费版每月额度抠抠搜搜,免费 tier 还不能商用;做点视频配音或有声书,几个月下来就是一笔订阅开销。更大的问题是素材得先上传云端——克隆自己声音、给未发布的视频配音,隐私完全交出去。

VoiceStudio 换了条路:所有模型都在本机跑,参考音频不离开你的硬盘。

它能做什么

官方把功能分成三组,对照着看就知道它不只是个 TTS 盒子:

创建

  • 语音克隆:3 秒参考音频就能出声;5–15 秒干净音频(单人、近麦、无背景音)效果更好。注意:参考音频是”提示”不是”训练”,效果上限看引擎、硬件和语言
  • 语音设计:用文字描述捏一个新声音(年龄、口音、音高、语气),不克隆真人

生产

  • 视频配音:转写 → 翻译 → 保留各说话人音色 → 重合成 → 导出成品视频。时间轴对不上的地方会标出来让你复核,还有术语表保证人名、地名翻译一致
  • 有声书:EPUB/PDF 导入,多人声分章渲染,导出 .m4b
  • 听写小部件:系统级热键全局语音转文字,任何 app 里都能用,还能挂本地 LLM 顺手润色
  • 人声分离、说话人分离、批量队列/监听文件夹自动处理

连接

  • 本地 API(OpenAI 兼容,localhost:3900)+ MCP 服务器:Claude Code / Codex / Cursor 的 agent 能直接调用它生成旁白、转写文件,数据不出本机。一条命令装 agent skill:npx skills add debpalash/VoiceStudio

一个实在的细节:合成语音默认带 Meta AudioSeal 水印(人耳听不出来),防滥用是做在默认项里的,比藏在复选框里实在。

真正的护城河:16 个 TTS + 11 个 STT 引擎

市面上有不少开源 TTS,每家都吹自己最强。Reddit 上有人横评了 echoTTS、Chatterbox、VibeVoice、Qwen3-TTS、IndexTTS2、Fish Audio、MOSS-TTS、OmniVoice 等八个本地引擎,结论是:没有单一最强,看语言和场景轮流赢。

VoiceStudio 的聪明之处是不押注单个模型:内置 16 个 TTS 引擎、11 个 STT 引擎,按任务一键切换。今天中文配音用这个,明天英文听写用那个——这才是它真正值钱的地方。

关于”646 种语言”:这是默认引擎 OmniVoice 的语言目录数,不是质量承诺。各引擎覆盖差异巨大(CosyVoice 3 只 9 语言 + 18 方言,VoxCPM2 约 30)。ElevenLabs 的 Flash v2.5 只标 32 种语言,但质量一致性是它的强项。语言数多 ≠ 每个语言都好。

中文读者看这里:阿里系的 CosyVoice 3(9 语言 + 18 方言)是中文引擎首选。只想玩声音克隆、不装一整套的,也可以先看看本站这篇《终极指南:Windows 本地零基础部署 Qwen3-TTS 声音克隆 WebUI》,轻量得多。

装完第一步:先切引擎——授权陷阱在这里

这是开写前反复核实的重点,直接关系到能不能拿它挣钱:

  1. 应用本身 AGPL-3.0:自己用、随便改都行;改了拿去做网络服务,就得按 AGPL 开源
  2. 默认引擎 OmniVoice 的坑:代码是 Apache-2.0,但模型权重是 CC-BY-NC(非商用)。默认装完开箱即用的就是它——拿它做商用音频等于踩雷
  3. 商用安全的引擎(Apache-2.0 端到端):CosyVoice 3、VoxCPM2、MOSS-TTS-v1.5

所以:装完第一步就该去模型目录把默认引擎换掉。非商用自己玩没关系,但养成习惯能省掉将来的麻烦。

上手:三步

1. 安装

  • macOS / Linux:README 的 “Get started” 一键安装命令
  • Windows 10/11 x64:官网/Release 页有桌面安装包
  • 另有 Docker 形态,适合不想动本机环境的人(本站另一篇 Docker 一键部署实战 的流程思路同样适用)

仓库自带 README_CN.md 中文文档,按中文文档走就行。

2. 首次运行下载模型权重

体积不小,留足磁盘空间,老机器建议跑一会儿别打断。

3. 克隆你的第一个声音

准备一段 5–15 秒干净的录音(单人说话、近麦、无背景音/混响),丢进语音克隆,选好引擎,生成试听。

先看硬件要求

先打预防针:这是”能跑”,不是”跑得爽”。

  • 参考坐标:RX 590 级别的老显卡,15 秒音频约 25–30 秒生成(32 步推理)——慢于实时。做有声书、视频配音够用,实时对话场景别指望
  • 有 CUDA 或苹果芯片的机器会快很多
  • 新手建议先从短音频开始,摸清楚自己机器的速度再开长任务

常见问题

Q:音质真的能平替 ElevenLabs 吗?

A:先说诚实话:没有公开的 VoiceStudio vs ElevenLabs 客观基准(找不到 MOS 对比测试)。ElevenLabs 在第三方盲测里是标杆(MOS 4.8–4.86/5,”听不出是合成” 73%)。VoiceStudio 这边的口碑是 r/LocalLLaMA 用户称 OmniVoice “way better than Qwen3、Chatterbox 或其它本地 TTS”。结论:平替的是”功能 + 成本 + 隐私”,不是”已证实的音质超越”。

Q:隐私口径到底怎么样?

A:官方承诺:本地流程跑自己硬件,远程服务可选,数据分析需要你同意才开。想彻底放心就断网跑本地引擎。

Q:旧资料搜到 OmniVoice-Studio,是同一个吗?

A:是的,那是 VoiceStudio 的曾用名(2026 年 4 月创建),搜旧 fork、旧教程时注意。

Q:给 agent 用需要学 MCP 吗?

A:不用深究,会装 skill 就行:npx skills add debpalash/VoiceStudio。MCP 协议本身可以看本站这篇《为本地大模型接入 MCP 服务》入门。

局限与不适合人群

  1. 无客观音质基准,对标 ElevenLabs 只能靠耳朵验收
  2. 默认引擎权重非商用,商用场景第一步必须切引擎
  3. README 自标 active beta,长尾 bug 和文档滞后是正常的
  4. 老硬件慢于实时,急着出活、要实时语音对话的人绕行

是否值得试

  • 值得:给自己视频配音、做有声书、隐私敏感场景(未发布内容、个人声音);玩 agent 自动化、想让本地 agent 会”说话”的人
  • 先别碰:要商用但不想折腾换引擎的人;追求开箱即用、拿来替代 ElevenLabs 日常生产的人

一句话

VoiceStudio 回答的不是”哪个 TTS 模型最强”,而是”当最好的模型取决于语言和场景时,能不能让你无痛切换”——答案是把 16 个引擎塞进一个本地工作流,加上视频配音和有声书这种完整生产链路。这种”平替功能+成本+隐私”的思路,值得折腾。

相关链接

  • 项目地址:https://github.com/debpalash/VoiceStudio(含简体中文 README_CN.md)
  • 开源协议:AGPL-3.0(注意默认引擎权重 CC-BY-NC)
  • agent skill:npx skills add debpalash/VoiceStudio

发表评论