AI在线 AI在线

开源免费语音克隆模型ChatterBox AI,性能测试超ElevenLabs

人工智能语音技术领域迎来重大突破!加拿大初创公司Resemble AI近日发布其首款开源文本转语音(TTS)模型ChatterBox,采用MIT许可证。 这一模型以其卓越的语音克隆能力、情绪控制功能和超低延迟特性,迅速成为行业焦点,甚至在盲测中超越了知名闭源模型ElevenLabs。 ChatterBox的发布背景ChatterBox是Resemble AI在语音合成领域的最新成果,基于0.5亿参数的Llama架构,训练数据高达50万小时的精选音频。

人工智能语音技术领域迎来重大突破!加拿大初创公司Resemble AI近日发布其首款开源文本转语音(TTS)模型ChatterBox,采用MIT许可证。这一模型以其卓越的语音克隆能力、情绪控制功能和超低延迟特性,迅速成为行业焦点,甚至在盲测中超越了知名闭源模型ElevenLabs。

image.png

ChatterBox的发布背景

ChatterBox是Resemble AI在语音合成领域的最新成果,基于0.5亿参数的Llama架构,训练数据高达50万小时的精选音频。相较于传统闭源TTS解决方案,ChatterBox以开源形式发布,旨在为开发者、创作者和企业提供高质量且自由度更高的语音生成工具。近期网络信息显示,ChatterBox自5月底发布以来,已在GitHub上获得数百个Star,显示出社区对其的高度认可。

其独特的功能,如零样本语音克隆、情绪夸张控制和实时推理,使其在语音助手、游戏、影视制作等领域展现出巨大潜力。ChatterBox的发布不仅降低了语音克隆技术的使用门槛,还为行业树立了新的标杆。

核心特性:技术突破与应用场景

零样本语音克隆

ChatterBox支持仅需数秒参考音频即可实现精准的语音克隆,无需额外训练。这种“零样本”能力极大简化了语音克隆流程,适用于个性化语音助手、虚拟角色配音等场景。开发者可通过简单的音频提示调整目标语音风格,确保输出高度贴合需求。

情绪控制创新

ChatterBox是首款支持情绪夸张控制的开源TTS模型,用户可通过单一参数调节语音的情感强度,从单调到戏剧化表达均可实现。这一功能使其在需要高度表现力的场景(如动画、广告和互动娱乐)中表现出色,显著优于传统模型的机械化输出。

超低延迟与易用性

得益于基于对齐的生成技术,ChatterBox实现快于实时的语音合成,适合实时应用如语音助手和游戏对话系统。配合专用的Python库(chatterbox-tts),开发者可轻松在本地或云端部署模型,并支持CUDA加速,进一步提升效率。

内置水印技术

为应对语音克隆可能带来的伦理问题,ChatterBox在生成音频中嵌入Resemble AI的PerTh神经水印技术。这种水印难以察觉但可追踪,确保生成内容的可追溯性,平衡了技术开放性与安全性。

行业影响:开源语音技术的里程碑

ChatterBox的开源发布标志着语音克隆技术从专有走向民主化。近期测试显示,63.75%的听众在盲测中更偏好ChatterBox的音频输出,优于行业标杆ElevenLabs,凸显其竞争力。 与此同时,ChatterBox的MIT许可证为开发者提供了无障碍的使用体验,预计将加速其在教育、娱乐和商业领域的普及。

然而,语音克隆技术的开放也引发了伦理讨论。网络动态指出,AI语音克隆已被用于诈骗和非授权内容生成,凸显了技术滥用的风险。 Resemble AI通过水印技术和社区规范呼吁,试图在开放创新与责任使用间找到平衡。AIbase认为,这一努力为行业树立了负责任开源的典范。

项目:https://github.com/resemble-ai/chatterbox

相关资讯

Resemble AI开源TTS Chatterbox ,性能直逼超越ElevenLabs

Resemble AI开源TTS Chatterbox ,性能直逼超越ElevenLabs

近年来,文本转语音(TTS)技术在人工智能领域的应用日益广泛,从智能助手到内容创作,TTS正在重塑我们与声音交互的方式。 一款名为Chatterbox的开源TTS模型横空出世,凭借其卓越的性能和创新功能,迅速成为行业焦点。 Chatterbox:开源TTS的革命性突破Chatterbox由Resemble AI开发,基于MIT许可证完全开源,允许开发者自由使用和修改。
5/29/2025 11:01:23 AM AI在线
拒绝高价订阅!Resemble AI 全面开源旗舰级 TTS 模型,自带防伪水印剑指商业应用

拒绝高价订阅!Resemble AI 全面开源旗舰级 TTS 模型,自带防伪水印剑指商业应用

人工智能语音领域迎来强力竞争者,初创公司 Resemble AI 正式发布了名为“Chatterbox Turbo”的开源文本转语音模型,其矛头直指 ElevenLabs 和 Cartesia 等行业巨头。 这款模型在性能上实现了显著突破,仅需五秒钟的参考音频即可精准克隆目标语音,并在短短150毫秒内输出首个音频片段。 这种极致的低延迟表现,使其成为构建实时 AI 代理、自动化客户支持、动态游戏角色、虚拟形象以及社交平台交互的理想选择。
12/29/2025 10:56:45 AM AI在线
​AI 初创公司Resemble筹集 1300 万美元以应对深度伪造技术威胁

​AI 初创公司Resemble筹集 1300 万美元以应对深度伪造技术威胁

最近,总部位于多伦多和旧金山的初创公司 Resemble AI 成功完成了最新一轮融资,筹集了1300万美元。 该公司的投资者包括谷歌的 AI 未来基金、Okta Ventures、台湾资本、Gentree Fund、IAG 资本伙伴、伯克利前沿基金以及 KDDI。 这次融资使 Resemble AI 迄今为止的总融资额达到了2500万美元。
12/16/2025 10:27:44 AM AI在线