模型与技术

Qwen-Audio-3.0-TTS:阿里的指令控制与多语言声音克隆

Qwen-Audio-3.0-TTS 由阿里开发,通过阿里云百炼提供语音合成和音色服务。它的吸引力在于把“用什么声音”和“怎么说”放在同一条创作流程中:先选择系统音色或复刻音色,再用自然语言描述表达方式,必要时直接在台词中插入情绪与拟声标签。

阿里巴巴 · 阿里云百炼资料核对日期
官方 SDK GitHub
提供方式
阿里云百炼云端 API
开发入口
DashScope SDK / WebSocket
声音来源
系统音色、声音复刻、声音设计
GitHub 说明
下方为官方客户端 SDK,并非模型权重仓库

值得关注的优势

01

直接描述“怎么说”

instruction 可以表达情绪、角色和朗读风格,例如“沉稳的纪录片旁白”或“年轻、活泼、语速稍快”。系统音色与复刻音色都可以使用指令。

官方来源 [1]
02

把表演提示写进台词

[excited]、[sad] 等标签控制后续表达,[laughing]、[sighing] 等标签在指定位置插入笑声、叹息,适合角色对白和有表现力的短片旁白。

官方来源 [1]
03

复刻音色也能指定方言

官方文档展示了通过“请用河南话表达”等指令控制复刻音色的用法。系统音色则需要选择对应语言或支持方言控制的声音。

官方来源 [1]

音色复刻与表达控制是两步

复刻时提交参考音频,取得与目标模型绑定的 Voice ID;通过审核后,合成任务再使用这个 ID。换模型不能直接复用原音色。

language_hints 用于语言提示,instruction 用于描述表达方式;二者不是同一个功能。声音设计则是根据文字描述创建新音色,与参考音频复刻不同。

官方来源 [2]

云端服务与开源模型要分清

本文介绍的是 Qwen-Audio-3.0-TTS 云端产品,GitHub 链接指向用于调用服务的 DashScope SDK。它不是下载权重后在本地运行的教程,也不把 Qwen3-TTS 的开源仓库当作这一系列的模型仓库。

官方来源 [3]

使用与部署

  1. 直接使用 DS Speech 时,在音色广场选择声音或创建私有音色,输入文本并设置表达方式即可。
  2. 自行接入时,先在阿里云百炼开通对应模型,取得 API Key,确认业务空间和地域;按官方文档设置对应的 HTTP 与 WebSocket 地址。
  3. 下面的命令仅安装官方 SDK。随后按实时合成示例传入模型、音色和文本;需要复刻音色时先完成音色创建与审核。
DashScopebash
python -m venv .venv
source .venv/bin/activate
pip install dashscope

使用前需要了解

  • 同一模型系列中,不同型号、音色与地域的能力范围可能不同,不能仅凭系列名称判断所有功能都可用。
  • 情绪与富语言标签的流式模式限制需要按官方文档核对;本文介绍模型能力,不代表 DS Speech 提供模型的每一种接口。

适合什么场景

适合希望用中文自然语言控制表演、制作方言内容、管理可复用音色,并通过云端服务完成多语言配音的创作者与开发者。

官方资料与出处

  1. Alibaba Cloud · Qwen-Audio-TTShttps://help.aliyun.com/zh/model-studio/realtime-tts-user-guide
  2. Alibaba Cloud · Voice enrollment HTTP APIhttps://help.aliyun.com/zh/model-studio/voice-clone-design-http-api
  3. DashScope Python SDKhttps://github.com/dashscope/dashscope-sdk-python

DS Speech 当前提供 Qwen-Audio-3.0-TTS 在线功能;资料库中其他模型的介绍、命令和链接用于帮助读者了解与自行部署。

继续了解其他模型

OmniVoice大规模语言覆盖与短音频声音克隆IndexTTS 1.5稳定中英文复刻与中文多音字纠音IndexTTS 2同一音色,独立调整情绪表现VoxCPM连续语音表示、上下文表达与高采样率输出