TTS 模型
[!info] 阅读导览
10 款主流 TTS 模型清单:语音克隆类(GPT-SoVITS / Fish Speech / OpenVoice)→ 情感与音色控制类(Parler-TTS / MetaVoice-1B / EmotiVoice)→ 对话与多角色(ChatTTS)→ 免费低门槛(edge-tts)→ 研究与前沿(Seed-TTS / MARS5-TTS)
flowchart LR
A[10 款 TTS 模型] --> B[语音克隆<br>GPT-SoVITS / Fish Speech / OpenVoice]
A --> C[情感与音色控制<br>Parler-TTS / MetaVoice-1B / EmotiVoice]
A --> D[对话与多角色<br>ChatTTS]
A --> E[免费低门槛<br>edge-tts]
A --> F[研究与前沿<br>Seed-TTS / MARS5-TTS]
1. TTS 模型
1.1. 模型清单
-
GPT-SoVITS(AI 卖货主播大模型 Streamer-Sales 销冠用的这款 TTS 模型)
- 支持英语、日语和中文
- 零样本文本到语音(TTS)
- 集成工具包 github:https://github.com/RVC-Boss/GPT-SoVITS
-
Fish Speech v1.2
- 效果稳定非常好
- 支持克隆语音
- 经过 30 万小时的英语、中文和日语音频数据的训练
- 模型:https://huggingface.co/fishaudio/fish-speech-1.2
- 在线版:https://fish.audio/zh-CN/
-
字节的 Seed-TTS(不开源)
- 支持多种语言包括英语、中文
- 能够进行同语言生成和跨语言生成
- 能处理各种文本,叙述性文本、情感表达、描述性文本等
- 能根据不同的情感和语境生成相应的语音
- 项目:https://bytedancespeech.github.io/seedtts_tech_report/
-
ChatTTS 对话式 TTS(可多人)
- 支持中英文
- 韵律细腻
- github:https://github.com/2noise/ChatTTS
- 模型:https://huggingface.co/2Noise/ChatTTS/tree/main
-
HuggingFace 的 Parler-TTS
- 可以控制音调、速度、性别、噪音水平、情绪特征等等
- github:https://github.com/huggingface/parler-tts
- 模型:https://huggingface.co/parler-tts
-
MetaVoice-1B
- 支持多语言
- 在英语处理上实现了情感语音节奏
- github:https://github.com/metavoiceio/metavoice-src
-
MARS5-TTS
- MARS5 可以为体育解说、动漫等韵律复杂和多样化的场景生成语音
- github:https://github.com/Camb-ai/MARS5-TTS
-
OpenVoice
- 原生支持英语、西班牙语、法语、中文、日语和韩语
- 具有灵活的语音风格控制和零样本跨语言语音克隆能力
- github:https://github.com/myshell-ai/OpenVoice
-
EmotiVoice
- 支持中英文双语
- 包含 2000 多种不同的音色
- github:https://github.com/netease-youdao/EmotiVoice/blob/main/README.zh.md
-
edge-tts
- 这个免费的也非常推荐,对中文支持也很不错
- github:https://github.com/rany2/edge-tts
1.2. 速览对比表
| 模型 | 支持语言 | 核心亮点 | 开源 |
|---|---|---|---|
| GPT-SoVITS | 中 / 英 / 日 | 零样本语音克隆,集成工具包 | ✅ |
| Fish Speech v1.2 | 中 / 英 / 日 | 30 万小时训练,克隆稳定 | ✅ |
| Seed-TTS | 中 / 英 等 | 情感语境生成,跨语言 | ❌(不开源) |
| ChatTTS | 中 / 英 | 对话式多角色,韵律细腻 | ✅ |
| Parler-TTS | 多语言 | 控制音调/速度/性别/情绪 | ✅ |
| MetaVoice-1B | 多语言 | 英语情感语音节奏 | ✅ |
| MARS5-TTS | 多语言 | 体育解说、动漫等复杂韵律 | ✅ |
| OpenVoice | 中 / 英 / 西 / 法 / 日 / 韩 | 零样本跨语言克隆 | ✅ |
| EmotiVoice | 中 / 英 | 2000+ 音色 | ✅ |
| edge-tts | 100+ 语言(含中文) | 免费、简单、效果好 | ✅ |
[!success] 核心要点
- 语音克隆首选:GPT-SoVITS(零样本、三语)、Fish Speech v1.2(30 万小时训练、稳定)、OpenVoice(跨语言克隆)
- 情感与音色控制:Parler-TTS(多维控制)、MetaVoice-1B(英语情感节奏)、EmotiVoice(2000+ 音色)
- 对话场景:ChatTTS 支持多人对话、韵律细腻
- 免费轻量:edge-tts 免费且中文支持好,适合快速上手
- 闭源参考:字节 Seed-TTS 情感与跨语言能力强,但不提供开源