ElevenLabs
基于深度学习的语音合成公司,提供接近真人水平的TTS服务,能捕捉语调、节奏、情感等细微特征
核心事实
时间轴 (近 90 天)
Breeze TTS2(3.5B参数)据开发者引用在Artificial Analysis排行榜上位列第一,超过Gemini和ElevenLabs,且为开放权重。
实时语音转写市场仍由ElevenLabs等竞争对手主导。
ElevenLabs等厂商的竞争力不仅来自模型本身,还包括流式管线、端点检测、低延迟工程优化等整套系统能力。
音乐与音效模型复用generateSpeech接口,text字段中描述目标声音而非待朗读文字,调用方无需学习新的请求格式,鉴权、计费、重试和追踪逻辑一致。
ElevenLabs的语音转文字模型包括elevenlabs/scribe-v2和elevenlabs/scribe-v2-realtime。
目前所有ElevenLabs模型在AI Gateway上前14天享受五折优惠,活动持续到11月9日。
ElevenLabs的音乐模型包括elevenlabs/music-v2.5和elevenlabs/music-v2。
Vercel与ElevenLabs达成合作,将14款ElevenLabs音频模型接入AI Gateway。
在流水线式实时语音方案中,官方示例使用Scribe v2 Realtime转写16kHz麦克风流,将转写文本发给语言模型(示例选用anthropic/claude-haiku-5.5),再将输出送入语音合成。
开发者可以使用同一个AI Gateway API Key调用ElevenLabs的语音转文字、流式语音合成、实时语音代理、音乐生成、音效制作和多声音对话六类音频能力。
还有 40 条时间轴事件
全部知识事实 (20)
ElevenLabs是一家专注于AI语音与音频合成技术的公司,以AI配音、语音克隆和文本转语音服务而知名
75%已验证ElevenLabs 的音效模型和 Stability AI 的 Stable Audio 等工具已能生成高质量环境音和拟声效果
75%已验证ElevenLabs 是成立于2022年的 AI 语音合成公司,支持超过30种语言,可用极少量音频样本克隆声音
75%已验证基于Transformer架构的语音合成模型通过在海量多说话人语料上预训练,能从极短音频中提取说话人的音色、语调、节奏等声纹特征
75%已验证ElevenLabs TTS API 的端点为 https://api.elevenlabs.io/v1/text-to-speech/{voiceId},使用 xi-api-key 请求头进行认证
70%已验证ElevenLabs 的 similarity_boost 参数(取值0-1)控制生成结果向原始声音克隆样本靠拢的程度,值过高时有时会出现伪影或音质下降
70%已验证ElevenLabs TTS API中,stability参数控制音色稳定性,similarity_boost影响与原音色的贴合度,style调整风格强度,use_speaker_boost决定是否启用说话人增强。
65%已验证similarity_boost(相似度增强)仅在克隆或指定声音场景下生效,值越高,生成语音越贴近参考音色,但过高时会放大源音频中的噪声或口音特征。
65%已验证ElevenLabs 的 stability 参数(取值0-1)控制生成语音的一致性,值越高输出越稳定、情绪变化越少,适合播报类场景
65%已验证ElevenLabs v4 支持 90 种语言
65%已验证ElevenLabs提供Dubbing API,支持29种语言的配音,具备语音克隆能力,可保留原始说话人音色并自动处理背景音分离与保留
65%已验证神经网络TTS模型(如Azure TTS、ElevenLabs、CosyVoice)可通过少量参考音频克隆特定说话人的音色、语速与情感风格
65%已验证ElevenLabs 推出全新的 v4 语音合成模型
65%待验证ElevenLabs基于深度学习模型,能够生成接近真人水平的语音输出,捕捉语调、节奏、情感等细微特征
90%待验证OpenAI的TTS API、ElevenLabs和开源的Bark模型都在推动AI语音生成领域快速发展
85%待验证ElevenLabs凭借高拟真度和情感克隆能力占据TTS高端市场
75%待验证在实时语音AI领域,OpenAI、ElevenLabs、Deepgram等公司都在布局相关产品
70%部分验证ElevenLabs的声音克隆端点可以在请求中设置voice_cloning: false强制使用通用声音,或上传经同意验证的样本后通过API删除模型。
65%待验证ElevenLabs 用一个 REST API 同时覆盖 TTS 和声音克隆功能。
60%待验证该AI音乐平台是环球音乐通过与ElevenLabs签订的多年期授权协议共同开发的
60%