前几天调试了刚出的omnivoice,本次再分享一个语音合成(TTS)领域的开源天花板——VoxCPM。我基于原版功能增加了多人对话语音合成功能,因为之前分享的时候有用户有多人对话语音合成需求,这次顺便增加了这个功能。

一、 什么是 VoxCPM?
VoxCPM(目前最新核心为 VoxCPM2)是由 OpenBMB 团队开源的顶尖 TTS 系统。它的核心优势在于采用了 Tokenizer-Free(无分词器)的端到端扩散自回归架构,底层基于拥有 20 亿参数的 MiniCPM-4 模型。
简单来说,它不仅声音极其自然逼真,而且支持 48kHz 的录音室级别音质输出。它在超过 200 万小时的多语种数据上进行了训练,原生支持 30 种语言。你不需要繁琐的音素标注,直接输入文字,它就能“读懂”上下文的语境,自动生成带有恰当情感和停顿的语音。
支持的30种语言:
阿拉伯语、缅甸语、中文、丹麦语、荷兰语、英语、芬兰语、法语、德语、希腊语、希伯来语、印地语、印尼语、意大利语、日语、高棉语、韩语、老挝语、马来语、挪威语、波兰语、葡萄牙语、俄语、西班牙语、斯瓦希里语、瑞典语、他加禄语、泰语、土耳其语、越南语
汉语方言:四川话、粤语、吴语、东北话、河南话、陕西话、山东话、天津话、闽南话
二、 核心功能与独家升级
在这个一键包中,你不仅能体验到原汁原味的 VoxCPM 强大功能,还能使用我专门定制的提效工具:
1. 基础能力:零样本克隆与音色设计
- 声音克隆 (Voice Cloning): 只需要提供一段几秒钟的纯净参考音频,模型就能完美复刻说话人的音色。并且你还可以通过文字指令去微调生成语音的语速、情感(例如在文字前加上:
稍微快一点,语气兴奋)。 - 音色设计 (Voice Design): 手头没有参考音频?没关系。直接用自然语言描述你想要的声音,比如输入
(一位年轻女性,声音温柔甜美),模型就能凭空为你“捏”出一个专属声音。 - 语境感知 (Context-Aware): 哪怕不加任何提示词,模型也能根据你输入的文本内容(比如疑问句、感叹句、或者悲伤的台词),自动推断出最适合的语气和语调。
2. 🔥 新增:多人对话语音合成
原版模型一次只能合成单人的声音,如果你在做有声书、播客或者剧情视频,需要频繁切换音色并手动在剪辑软件里拼接音频,非常耗时。
为了解决这个痛点,我在前端界面中加入了多人对话剧本解析功能。
- 用法: 你只需按指定格式输入多角色的对话剧本(例如:
[sp1]你好!\n [sp2]嗨,好久不见。),提取上传的每个音频素材为音色进行语音合成。 - 效果: 软件会自动切割剧本,分角色调用底层模型进行合成,并在最终自动拼接成一个完整的多人对话长音频,极大提升了内容创作者的效率。
三、 整合包用法说明
作为免安装的绿色整合包,使用方法极其简单:
- 下载压缩包后,将其解压到一个纯英文路径的文件夹中。
- 双击根目录下的
启动软件.exe,等待后台加载模型(首次加载时间取决于你的硬盘和显卡速度)。 - 加载完成后,会自动在浏览器弹出可视化操作界面。
- 在界面导航中选择单人或多人语音合成模式
VoxCPM2单人语音合成的三种方式:
🎨 声音设计(Voice Design)
无需参考音频。在 Control Instruction 中描述目标音色特征(性别、年龄、语气、情绪、语速等),VoxCPM2 即可为你从零创造独一无二的声音。
🎛️ 可控克隆(Controllable Cloning)
上传参考音频,同时可选地使用 Control Instruction 来指定情绪、语速、风格等表达方式,在保留原始音色的基础上灵活控制说话风格。
🎙️ 极致克隆(Ultimate Cloning)
开启 极致克隆模式 并提供参考音频的文字内容(可自动识别)。模型会将参考音频视为已说出的前文,以音频续写的方式完整还原参考音频中的所有声音细节。注意:该模式与可控克隆模式互斥,将禁用Control Instruction。
如果文本内需要控制说话情绪语气,关键词需要用英文括号()括起来,不要用中文(),如:
(惊恐,害怕)你真的……对我没有过一点动心吗?多人对话语音合成
最多支持 5 人。左侧按顺序上传音频:第 1 个是 [sp1],第 2 个是 [sp2]。。。
右侧每行一个说话人文本
[sp1]你好啊。
[sp2]你好,很高兴见到你
[sp1]我们开始测试多人对话合成吧。四、 注意事项
- 硬件要求: 英伟达显卡显存不低于6G,使用前先更新英伟达显卡驱动
- 系统要求:windows 10 或 11
- 路径警告: 这是很多新手最容易踩的坑——请务必保证整合包所在的路径中没有任何中文字符或特殊符号以及空格,否则极易导致底层程序找不到路径而报错。
- 合理合规使用: 请大家务必在法律允许的范围内使用声音克隆功能。切勿将未经授权的他人声音用于非法、侵权或欺诈用途。
VoxCPM多人对话语音合成工具下载链接
https://pan.quark.cn/s/af8ec972f839
相关推荐
VibeVoice:富有表现力的长篇多人对话语音合成工具整合包下载
带声音克隆功能的对话型文字转语音软件higgs-audio免安装一键启动整合包下载
多人对话语音合成软件CSM整合包,AI多人文字转语音工具
自动翻译图片文字识别TTS工具STranslate免费下载
3秒极速声音克隆软件CosyVoice整合包下载,声音复刻情感语音合成TTS文字转语音工具
免费离线TTS文字转语音工具clone-voice整合包下载,声音克隆软件克隆自己的声音
免费TTS文字转语音合成软件GPT-SoVITS v2ProPlus整合包下载,AI声音克隆软件
微软文字转语音软件下载,tts在线文本转语音合成软件工具edge-tts一键整合包
最近更新

图像无损放大神器:Topaz Gigapixel AI软件下载及使用指南
在数字内容创作成风头的今天,我们经常会遇到低分辨率素材模糊、AI 生成图片尺寸太小、或者老照片充满噪点的情况。传统的图像放大方式(如双三次插值)只是单纯地拉伸像素,容易让画面变得模糊、虚化。 如果你正在寻找一种能“凭空”补齐细节、让低画质瞬...

AI视频提示词反推工具,参考视频即梦提示词一键生成
本工具是一款面向 AI 视频生成创作者的本地离线辅助软件。用户导入任意视频文件,工具会自动完成场景检测、关键帧提取、多模态模型分析、提示词拼装等全流程,最终输出一份可直接复制粘贴到即梦 AI 等视频生成平台的完整提示词。 适用场景 功能特点...
免费在线HTML转markdown工具
经常看一些在线文档,想复制给AI参考的话不方便直接复制,转换成markdown再给AI阅读会更简单明了,也方便自己查阅,这里给大家推荐两个在线的免费HTML转markdown网站。 1、https://d1tools.com/tools/c...

闲鱼自动回复机器人XianyuAutoAgent下载,24小时在线智能客服机器人系统
XianyuAutoAgent是一款面向闲鱼平台的智能化自动回复机器人,利用大语言模型自动识别买家意图并生成专业回复,实现 7×24 小时智能客服。 主要功能 1. 智能自动回复 2. 可视化 Web UI 3. 人工接管模式 4. 安全防...

AI漫剧制作即梦seedance2.0教程及提示词2026年5月最新版分享
AI视频依旧持续火爆,各种类型的AI视频层出不穷,视频效果也是越来越好,甚至快接近影视级,目前最主要的AI视频生成工具还是即梦,即梦 Seedance 2.0生成视频一秒钟都到2块多钱了😂,不过也没办法,还是得用,目前还没能有替代即梦see...

AI实时语音聊天对话系统,外语口语陪练/虚拟好友实时语音交流
AI 实时语音对话系统 是一款集语音识别(ASR)、大语言模型(LLM)对话、语音合成(TTS)于一体的实时语音交互软件。用户通过麦克风说话,系统自动识别语音内容并转为文字,交由 AI 角色进行智能回复,最终将回复内容合成为语音实时播放,实...

ComfyUI 三参考图生图工作流,虚拟试衣、换脸、图片内容整合
本工作流核心能力是将三张不同角度、内容的参考图,通过 AI 理解融合,生成一张新的图像,新图像内容根据描述词指令生成。工作流集成了阿里巴巴的 Qwen2.5-VL 多模态大模型(图像编辑版本)与 SeedVR2 超分辨率放大模型,实现了「理...
comfyui CUDA128+torch 2.8.0+python3.12最新纯净版一键启动整合包
comfyui官方发布的最新版便携包是基于torch 2.11+CU130 +Python 3.13版本制作的,Python版本和torch版本都太新了,windows电脑上安装某些节点的时候会有冲突报错,有时候就算能安装上也会比较麻烦,感...
LTX2.3+comfyui音频驱动视频生成工作流
这是一个基于 ComfyUI 的 LTX 2.3 音视频同步生成工作流,核心功能是上传一段音频 + 参考图片(可多张图),自动生成与音频内容对应的视频,适合制作人物说话、唱歌等口型同步视频。工作流使用8位量化版ltx2.3模型,显存需求降低...
LTX2.3+comfyui分段提示词图片转视频工作流,AI视频带货生成器
再和大家分享一个基于 ComfyUI 的 AI 分段提示词图生视频工作流,本工作流主要基于模型LTX2.3和PromptRelay实现。可使用PromptRelay分时段控制生成不同视频画面或合成语音内容。 📌 工作流简介 本工作流是一套基...


















