모델과 기술

Qwen-Audio-3.0-TTS: Alibaba의 지시 제어와 다국어 음성 복제

Alibaba가 개발하고 Model Studio에서 제공하는 Qwen-Audio-3.0-TTS는 음색 선택과 연기 지시를 하나의 제작 흐름으로 연결합니다. 시스템 또는 복제 음색을 고른 뒤 원하는 전달 방식을 설명하고 필요한 위치에 감정이나 발성 태그를 넣을 수 있습니다.

Alibaba · Alibaba Cloud Model Studio자료 확인일
공식 SDK GitHub
제공 방식
Alibaba Cloud Model Studio API
연동
DashScope SDK / WebSocket
음색
시스템 음색·복제·음성 디자인
GitHub 범위
클라이언트 SDK이며 모델 가중치 저장소가 아님

주목할 장점

01

어떻게 말할지 문장으로 지시

차분한 다큐멘터리 내레이터나 조금 빠르게 말하는 활기찬 캐릭터를 instruction으로 설명할 수 있습니다. 시스템과 복제 음색 모두 지시를 사용할 수 있습니다.

공식 출처 [1]
02

대사에 연기 단서 추가

[excited], [sad]는 뒤의 말투를 바꾸고 [laughing], [sighing]은 지정 위치에 웃음과 한숨을 넣습니다. 한 문단에서 분위기가 바뀌는 대사에 유용합니다.

공식 출처 [1]
03

복제 음색에도 방언 지시

공식 문서는 복제 음색에 중국어 방언을 지시하는 예를 제공합니다. 시스템 음색은 해당 언어나 방언 제어를 지원하는 목소리를 선택해야 합니다.

공식 출처 [1]

음색 등록과 표현 지시는 별도 단계

참조 녹음으로 대상 모델에 연결된 Voice ID를 생성하고 승인 후 합성에 사용합니다. 모델을 변경할 때 기존 ID를 그대로 사용할 수는 없습니다.

language_hints는 언어 힌트이고 instruction은 전달 방식입니다. 음성 디자인은 설명으로 새 목소리를 만드는 기능으로 참조 기반 복제와 다릅니다.

공식 출처 [2]

클라우드 제품과 SDK 구분

아래 GitHub는 공식 DashScope 클라이언트 SDK입니다. Qwen-Audio-3.0-TTS 가중치를 내려받아 실행하는 저장소가 아니며 별개 계열인 Qwen3-TTS 공개 코드와도 구분합니다.

공식 출처 [3]

사용 및 배포

  1. DS Speech에서는 공개 음색을 선택하거나 전용 음색을 만든 뒤 텍스트와 전달 방식을 설정합니다.
  2. 직접 연동하려면 Model Studio에서 모델을 활성화하고 API Key, 리전과 워크스페이스에 맞는 주소를 확인합니다.
  3. 아래 명령은 SDK만 설치합니다. 이후 공식 합성 예제에 모델, 음색과 텍스트를 넣고 복제 음색은 먼저 등록과 승인을 완료합니다.
DashScopebash
python -m venv .venv
source .venv/bin/activate
pip install dashscope

사용 전 알아둘 점

  • 모델 종류, 음색과 리전에 따라 지원 범위가 다릅니다. 계열 이름만으로 개별 음색의 기능을 판단할 수 없습니다.
  • 감정·발성 태그의 스트리밍 모드 제한을 확인하세요. 모델의 모든 API가 DS Speech에 노출된 것은 아닙니다.

적합한 활용 사례

중국어 방언, 자연어 연기 지시, 재사용 음색과 다국어 내레이션을 관리형 클라우드 흐름에서 제작하려는 사용자에게 적합합니다.

공식 자료와 출처

  1. Alibaba Cloud · Qwen-Audio-TTShttps://help.aliyun.com/zh/model-studio/realtime-tts-user-guide
  2. Alibaba Cloud · Voice enrollment HTTP APIhttps://help.aliyun.com/zh/model-studio/voice-clone-design-http-api
  3. DashScope Python SDKhttps://github.com/dashscope/dashscope-sdk-python

DS Speech는 현재 Qwen-Audio-3.0-TTS를 온라인으로 제공합니다. 다른 모델의 소개, 명령과 링크는 학습과 자체 배포를 위한 자료입니다.

다른 음성 모델 알아보기

OmniVoice넓은 언어 범위와 짧은 참조 음성 복제IndexTTS 1.5안정적인 중국어·영어 복제와 중국어 발음 수정IndexTTS 2같은 음색으로 다른 감정 연기VoxCPM연속 음성 표현·문맥·고해상도 오디오