文字转语音 API:语音合成集成的完整开发者指南

2026年1月23日

文字转语音 API:语音合成集成的完整开发者指南

为应用程序添加语音功能会改变用户与之交互的方式。文字转语音 API 可以将书面内容转换为自然的人声,从而扩展从无障碍功能、语音助手到有声读物制作和对话式 AI 代理的各种使用场景。挑战在于选择能够有效实现这一过程的合适供应商。

本指南不仅概述了选择 TTS API 时值得考虑的关键因素,还对比了 2025 年可用的主要选项,并提供了实际集成示例以帮助您快速上手。

文字转语音 API 的实际作用

文字转语音 API 接收文本输入,通过涉及多个计算步骤的过程返回合成音频,包括文本规整(处理数字、缩写和特殊字符)、语言分析(确定发音和语调)以及音频生成(产生实际的音频波形)。

现代 TTS 系统通常可以分为两类。第一类是拼接合成,它将预先录制的音频片段拼接在一起,但可能会导致明显的过渡痕迹。第二类是神经网络 TTS,它依赖于在海量音频数据集上训练的深度学习模型,生成的语音听起来很自然,并能捕捉情感细微差别。目前,几乎所有生产级 API 都广泛采用了神经网络 TTS,但不同供应商之间的质量差异很大。

典型的 API 工作流程通常遵循以下步骤:1) 使用您的 API 密钥进行身份验证;2) 发送包含文本和语音参数的 POST 请求;3) 接收音频数据(通常以流或文件的形式交付)。大多数供应商不仅支持 MP3、WAV 和 Opus 等常见格式,还提供可配置的采样率和比特率。

评估 TTS API 时需要考虑的关键因素

语音质量与自然度

语音质量决定了用户对应用程序的感知是专业还是业余。应密切关注机械感、不自然的停顿和发音错误,特别是在处理特定领域的术语时。应使用实际内容进行测试,因为不同供应商在技术词汇、多语言内容和较长段落上的表现可能各不相同。

目前,领先的神经网络 TTS 引擎在标准化基准测试中的词错率已降至 1% 以下。然而,出色的基准测试结果并不能保证在实际场景中也有相当的表现。例如,一个擅长日常英语对话的供应商可能在处理医学术语或代码混合文本时仍然感到吃力。

延迟与流式传输支持

对于语音助手和对话式 AI 等实时应用,延迟是一个关键考虑因素。首字节时间 (TTFB) 衡量 API 在收到请求后开始返回音频的速度。在生产过程中,语音代理通常需要低于 500ms 的 TTFB 才能保持自然的对话流。

流式传输支持使得在生成完整响应之前即可开始播放音频。这种架构模式显著提高了感知的响应速度,特别是在处理较长的文本段落时。

语言与音色选择

在为应用程序选择语言时,必须考虑当前及未来可能使用的语言。一些供应商提供 50 多种语言,但质量水平参差不齐;而另一些供应商则专注于较少的语言,在深度优化方面表现出色。供应商需要包含目标语言中用户期望的特定方言或口音。

音色的多样性同样重要。精心打造的 10 个高质量音色库比 500 个平庸的选项更有价值。因此,供应商应高度重视音色在年龄、性别和说话风格方面的多样性,以符合品牌要求。

价格结构

大多数 TTS 平台遵循以下三种定价模式之一:按字符计费、按音频分钟计费或具有预定义使用配额的订阅套餐。按字符计费适用于可预测的文本密集型场景;而按分钟计费通常更适合音频时长与输入文本长度不直接对应的应用。

另一个考虑因素是潜在的隐藏成本。一些供应商对更高质量的模型、特定音色或语音克隆等高级功能收取溢价。用户需要在投入之前评估不同场景下的预期使用模式。

主流 TTS API 提供商对比

云平台选项

Google Cloud Text-to-Speech 为已在 GCP 生态中运行的团队提供了无缝集成。该服务提供涵盖 50 多种语言的 380 多种音色,其中 WaveNet 和 Neural2 模型提供高质量输出。通过 SSML 支持,可以对发音、停顿和重音进行细粒度控制。神经网络音色的定价约为每百万字符 4 美元起,并为开发用途提供丰厚的免费额度。

Amazon Polly 非常适合 AWS 原生应用,支持实时流传输和批处理。该服务提供涵盖 30 多种语言的神经网络和标准语音选项。对于现有的 Amazon 客户,与其他 AWS 服务的集成有助于简化部署。

Microsoft Azure Speech 通过自定义神经网络语音提供广泛的定制服务,使企业能够使用自己的录音训练品牌特有的语音模型。此外,该平台还支持通过容器进行本地部署,适用于对数据驻留有严格要求的组织。

专业 TTS 提供商

ElevenLabs 以其极具自然度且情感丰富的音色而闻名,是产生有声读物、游戏和创意内容的流行选择。该平台擅长从简短的音频样本中进行语音克隆。然而,ElevenLabs 的定价定位在市场高端,且主要侧重于英语内容。

OpenAI TTS 为已经利用 GPT 模型的团队提供了简单的集成。该 API 通过简单的 REST 端点在 11 种预设音色中提供一致的质量。尽管缺乏专业供应商那样的深度定制能力,但其统一的价格结构和熟悉的 API 模式有助于降低开发复杂性。

对于处理多语言内容,尤其是涉及中文、日文或混合语言脚本的创作者,Fish Audio 因其出色的跨语言表现和情感控制能力而脱颖而出。Fish Audio S1 模型在基准评估中实现了极低的错误率(CER 约为 0.4%,WER 约为 0.8%),其语音克隆仅需 10 秒参考音频即可实现准确复刻。

Fish Audio 目前支持八种语言(包括英语、中文、日文、德语、法语、西班牙语、韩语和阿拉伯语),并具备完整的情感标签功能。其情感控制系统直接在文本中嵌入特定标签,如 (excited)、(nervous) 或 (confident),而不是依赖自然语言指令,从而在输出中提供可预测且一致的结果。

  1. 访问 fish.audio
  2. 导航至 TTS 体验区
  3. 截取显示可见情感标签的文本输入区域截图 注释:高亮显示带有情感标签的句子 推荐尺寸:1200x800 文件名:fish-audio-tts-playground-screenshot.png

img

实际集成示例

Python 集成

大多数 TTS API 在 Python 中都遵循类似的模式。以下是使用 requests 库的基本结构:

import requests

def synthesize_speech(text, api_key, voice_id):
    headers = {
        "Authorization": f"Bearer {api_key}",
        "Content-Type": "application/json"
    }

    payload = {
        "text": text,
        "voice": voice_id,
        "format": "mp3"
    }

    response = requests.post(
        "https://api.example.com/v1/tts",
        headers=headers,
        json=payload
    )

    if response.status_code == 200:
        with open("output.mp3", "wb") as f:
            f.write(response.content)
        return True
    return False

from fishaudio import FishAudio
from fishaudio.utils import save

client = FishAudio(api_key="your-api-key")

# 基础文字转语音
audio = client.tts.convert(
    text="Welcome to our application.",
    reference_id="your-voice-model-id"
)

save(audio, "welcome.mp3")

# 使用情感标签
audio_emotional = client.tts.convert(
    text="(excited) I can't believe we finally launched!",
    reference_id="your-voice-model-id"
)

JavaScript 集成

对于 Web 应用程序,直接调用 TTS API 或将音频流传输到浏览器都是可行的:

async function textToSpeech(text, apiKey) {
  const response = await fetch('https://api.example.com/v1/tts', {
    method: 'POST',
    headers: {
      'Authorization': `Bearer ${apiKey}`,
      'Content-Type': 'application/json'
    },
    body: JSON.stringify({
      text: text,
      format: 'mp3'
    })
  });

  if (response.ok) {
    const audioBlob = await response.blob();
    const audioUrl = URL.createObjectURL(audioBlob);
    const audio = new Audio(audioUrl);
    audio.play();
  }
}

// 在需要立即播放音频的流式传输场景中:

async function streamTTS(text, apiKey) {
  const response = await fetch('https://api.example.com/v1/tts/stream', {
    method: 'POST',
    headers: {
      'Authorization': `Bearer ${apiKey}`,
      'Content-Type': 'application/json'
    },
    body: JSON.stringify({ text })
  });

  const reader = response.body.getReader();
  const audioContext = new AudioContext();

  // 随到随处理音频分块
  while (true) {
    const { done, value } = await reader.read();
    if (done) break;

    // 解码并播放音频块
    const audioBuffer = await audioContext.decodeAudioData(value.buffer);
    const source = audioContext.createBufferSource();
    source.buffer = audioBuffer;
    source.connect(audioContext.destination);
    source.start();
  }
}

语音克隆注意事项

语音克隆是一种根据样本音频生成特定声音合成版本的技术,它能够实现个性化体验、品牌专属语音以及为失语人士提供无障碍解决方案。

克隆声音的质量很大程度上取决于参考音频的质量。没有背景噪音的清晰录音、一致的说话风格以及足够的音频长度通常有助于获得更好的结果。Fish Audio 的语音克隆至少需要 10 秒的参考音频,而 15-30 秒通常能更准确地复刻说话模式和情感倾向。

同时,密切关注伦理和法律问题至关重要。请记住,在克隆他人的声音之前务必获得明确同意,并实施安全措施以防止滥用。许多供应商已将同意验证作为其服务条款的一部分。

常见集成挑战

速率限制影响着大多数 TTS API。在处理错误时应实施指数退避,并考虑对生成音频中频繁请求的内容进行缓存,而不是每次都重新生成。

音频格式兼容性在不同平台和浏览器之间有所不同。MP3 享有几乎普遍的支持;但在带宽效率至关重要的应用中,可以考虑使用 Opus;而 WAV 是需要进一步处理的无压缩音频的理想选择。

文本预处理,例如展开缩写、为不常用术语添加发音指南以及将长段落拆分为更小的片段,有助于提高输出质量。尽管大多数 API 都会执行某种程度的自动处理,但显式格式化通常有助于产生更好的结果。

成本管理需要监控,包括实施使用情况跟踪、设置预算警报以及考虑在将文本发送到 API 之前进行预处理以删除不必要的内容。

选择合适的 TTS API

TTS API 是否合适取决于用户的特定需求。对于与云平台深度集成的团队,原生选项(Google Cloud、Azure、AWS)可以帮助最大限度地减少运营开销。对于优先考虑最高英语语音质量的应用,像 ElevenLabs 这样的专业供应商会更合适。

对于多语言应用,尤其是涉及亚洲语言或混合语言内容的应用,Fish Audio 在发音准确性和流畅的跨语言处理方面具有切实优势。其情感标签系统无需复杂的 SSML 标记即可提供可预测的控制,而其语音克隆功能只需极少的参考音频即可有效运行。

在投入付费计划之前,先利用免费额度评估适用性。使用实际内容进行测试,测量实际条件下的延迟,并让目标用户评估语音质量,而不仅仅是依赖演示样本。


Kyle Cui

Kyle CuiX

Kyle is a Founding Engineer at Fish Audio and UC Berkeley Computer Scientist and Physicist. He builds scalable voice systems and grew Fish into the #1 global AI text-to-speech platform. Outside of startups, he has climbed 1345 trees so far around the Bay Area. Find his irresistibly clouty thoughts on X at @kile_sway.

阅读Kyle Cui的更多内容 >

创造真实感的声音

立即开始生成最高质量的音频。

已有账号? 登录

文字转语音 API:语音合成集成的完整开发者指南 - Fish Audio Blog