モデルと技術

Qwen-Audio-3.0-TTS:Alibaba の指示制御と多言語音声クローン

Alibaba が開発し Model Studio で提供する Qwen-Audio-3.0-TTS は、声の選択と演出を同じ制作工程にまとめます。システム音色やクローン音色を選び、話し方を自然言語で伝え、必要な箇所に感情や発声のタグを追加できます。

Alibaba · Alibaba Cloud Model Studio資料確認日
公式 SDK GitHub
提供方式
Alibaba Cloud Model Studio API
接続方式
DashScope SDK / WebSocket
音色
システム音色・クローン・音声デザイン
GitHub の範囲
クライアント SDK。モデル重みの配布先ではありません

注目したい強み

01

どのように話すかを文章で指定

落ち着いたドキュメンタリー調や、元気で少し早口の人物などを instruction に記述できます。システム音色とクローン音色の両方で指示を使えます。

公式の出典 [1]
02

台詞に演技の手掛かりを入れる

[excited] や [sad] は後続の話し方を変え、[laughing] や [sighing] は指定位置に笑いやため息を挿入します。途中で感情が変化する台詞にも使えます。

公式の出典 [1]
03

クローン音声に方言を指定

公式文書ではクローン音色に中国語方言を指示する例を掲載しています。システム音色は対象言語や方言制御に対応したものを選びます。

公式の出典 [1]

音色の登録と表現指示を分けて考える

参照録音から対象モデルに紐づく Voice ID を作り、審査後に合成で利用します。モデルを変える場合、既存 ID をそのまま使うことはできません。

language_hints は言語のヒント、instruction は表現の指示です。音声デザインは文章から新しい音色を作るもので、録音からの復刻とは別の機能です。

公式の出典 [2]

クラウド製品と SDK の違い

下の GitHub は DashScope の公式クライアント SDK です。Qwen-Audio-3.0-TTS の重みをローカル実行するリポジトリではなく、別系統の Qwen3-TTS の公開コードとも区別しています。

公式の出典 [3]

利用・導入方法

  1. DS Speech では公開音色を選ぶか専用音色を作り、文章と話し方を設定します。
  2. 独自接続では Model Studio でモデルを有効化し、API Key、地域、ワークスペースに対応するエンドポイントを確認します。
  3. 下のコマンドは SDK のみを導入します。その後は公式例に従いモデル、音色、文章を指定します。クローン音色は先に登録と審査が必要です。
DashScopebash
python -m venv .venv
source .venv/bin/activate
pip install dashscope

利用前に知っておくこと

  • モデルの型番、音色、地域によって機能範囲が異なります。シリーズ名だけでは個々の音色の対応機能を判断できません。
  • 感情・発声タグのストリーミング方式の制限は公式文書を確認してください。モデルの全 API が DS Speech で公開されているわけではありません。

適した用途

自然言語による演出、中国語方言、多言語の配音を、音色管理付きのクラウド工程で制作したい方に適しています。

公式資料・出典

  1. Alibaba Cloud · Qwen-Audio-TTShttps://help.aliyun.com/zh/model-studio/realtime-tts-user-guide
  2. Alibaba Cloud · Voice enrollment HTTP APIhttps://help.aliyun.com/zh/model-studio/voice-clone-design-http-api
  3. DashScope Python SDKhttps://github.com/dashscope/dashscope-sdk-python

DS Speech は現在 Qwen-Audio-3.0-TTS をオンライン提供しています。ほかのモデルは学習・セルフホスト向けの資料として紹介しています。

ほかの音声モデル

OmniVoice幅広い言語と短い参照録音からのクローンIndexTTS 1.5安定した中英クローンと中国語発音修正IndexTTS 2同じ人物の声で異なる感情を演じるVoxCPM連続音声表現・文脈・高サンプルレート