조코딩의 쇼츠 **「일레븐랩스 다 따라잡아버린 오픈소스 등장」**에서는 Fish Audio가 공개한 최신 TTS 모델 **Drama 3**를 소개합니다. > 영상에서는 ‘오픈소스’라고 표현하지만, 정확히는 **오픈 웨이트(open-weight)** 모델입니다. 모델 가중치는 공개되어 직접 실행할 수 있지만, 상업 이용에는 Fish Audio Community License 조건이 적용됩니다. ## Drama 3는 무엇인가? Drama 3는 Fish Audio가 2026년 10월 공개한 차세대 음성 생성 모델입니다. 핵심은 단순히 문장을 읽는 수준을 넘어, **감정·연기 톤·속삭임·웃음·울먹임 같은 표현을 자연어 지시로 제어**할 수 있다는 점입니다. 예를 들어: - 슬프게 말해줘 - 화를 참고 있는 느낌 - 중간에 웃음을 섞어줘 - 이 문장만 속삭여줘 처럼 배우에게 디렉션하듯 음성을 만들 수 있습니다. ## ElevenLabs와 비교되는 이유 최근 고품질 TTS 시장에서 ElevenLabs가 대표적인 상용 서비스로 자리 잡았는데, Drama 3는 음질뿐 아니라 **감정 표현과 연기 제어**를 강점으로 내세웁니다. Fish Audio 공식 자료에 따르면 Drama 3는 Artificial Analysis의 Pronunciation Robustness 벤치마크에서 **93.2%**를 기록해 당시 1위를 차지했습니다. 즉, 감정 표현을 강화하면서도 어려운 단어·숫자·코드의 발음 정확도까지 높인 것이 특징입니다. ## 주요 기능 - 자연어 기반 감정·연기 지시 - 다중 화자 생성 - Voice Cloning - 긴 문장·장문 음성 생성 - 이전 결과에 대한 추가 지시로 재생성 - 특정 단어·구간만 부분 수정 - Streaming Audio 생성 특히 전체 음성을 다시 만들지 않고 일부 표현만 바꾸는 **Local Editing / Infilling** 기능이 중요한 변화입니다. ## 모델 구조 공식 자료 기준 Drama 3는: - 35B MoE 규모 - 약 3B Parameter 활성화 - Qwen3.5 계열 Backbone 기반 - 44.1kHz Audio 출력 - 10개 Codebook 구조를 사용합니다. 이전 S2 계열보다 모델 규모는 크게 커졌지만 MoE 구조를 활용해 실제 활성 Parameter를 줄이는 방식입니다. ## 직접 실행할 수 있다 Drama 3의 모델 Weight는 Hugging Face를 통해 공개되어 직접 서버에 올려 사용할 수 있습니다. Fish Audio 공식 구현체인 fish-speech와 SGLang-Omni 기반 추론 환경도 제공됩니다. 다만 현재 공식 문서 기준으로 Drama 3 로컬 추론은 **NVIDIA GPU 중심**이며 CPU, Apple MPS, AMD ROCm은 지원하지 않습니다. ## 라이선스 주의 Drama 3는 완전한 무제한 오픈소스 라이선스가 아닙니다. Fish Audio Community License v1.0 기준으로: - 연구·비상업적 사용 가능 - 본인 및 계열사 연 매출이 50만 달러 미만이면 일정 범위에서 무료 상업 이용 가능 - 그 이상 규모의 상업적 사용이나 TTS API/서비스 제공은 별도 라이선스 필요 조건이 있습니다. 또한 실제 사람의 음성을 **동의 없이 복제하는 행위는 금지**되어 있습니다. ## 왜 주목할 만한가? 기존 고품질 Voice AI는 대부분 클라우드 API 중심이었습니다. Drama 3 같은 Open-weight TTS 모델이 발전하면: - 자체 서버 음성 생성 - 사내 음성 AI - 게임 캐릭터 음성 - 오디오북 - 더빙 - 영상 제작 자동화 - AI Agent Voice Interface 같은 영역에서 외부 API 의존도를 줄일 수 있습니다. ## 핵심 정리 Drama 3의 핵심은 단순히 '무료 TTS'가 아닙니다. > **상용 수준에 가까운 감정 표현과 Voice Direction 기능을 갖춘 대형 Open-weight 음성 모델이 등장했다는 점** 이 중요합니다. 특히 영상·게임·오디오 콘텐츠 제작에서는 텍스트를 읽는 TTS를 넘어, **AI에게 실제 배우처럼 연기 지시를 내리는 방향**으로 Voice AI가 발전하고 있다는 흐름을 보여줍니다.