Реалізація мультимовного синтезу мови Мультимовний TTS потрібний для міжнародних продуктів: один сервіс, кілька мов, єдиний голосовий бренд. Ключова вимога – збереження характеру голосу під час перемикання мов. ### Стратегії мультимовного TTS 1. Language-specific моделі - найкраща якість, але різні голоси:```python
TTS_MODELS = {
"ru": "Yandex SpeechKit (alena)",
"en": "OpenAI TTS (alloy)",
"de": "Azure (de-DE-KatjaNeural)",
}
**2. XTTS v2 з cross-lingual synthesis** - один голос, 17 мов:python
from TTS.api import TTS
tts = TTS("tts_models/multilingual/multi-dataset/xtts_v2").to("cuda")
def speak_multilingual(text: str, lang: str, reference_voice: str) -> np.ndarray:
return tts.tts(
text=text,
speaker_wav=reference_voice,
language=lang
)
**3. ElevenLabs Multilingual v2** — 29 мов з високою якістю:python
audio = client.text_to_speech.convert(
voice_id="voice_id",
text=text,
model_id="eleven_multilingual_v2",
language_code=lang # auto-detect если не указан
)
### Детекція мови та маршрутизаціяpython
from langdetect import detect
def synthesize_auto(text: str, voice_config: dict) -> bytes:
lang = detect(text) # ISO 639-1
engine = voice_config.get(lang, voice_config["default"])
return engine.synthesize(text)
### Обробка code-switching Тексти зі змішаними мовами («наш product manager говорить...»):python
def split_by_language(text: str) -> list[tuple[str, str]]:
"""Разбивает текст на сегменты по языку"""
# Простое правило: английские слова в кириллическом тексте
import re
segments = []
parts = re.split(r'(\b[A-Za-z][a-zA-Z\s-]*\b)', text)
for part in parts:
if re.match(r'[A-Za-z]', part):
segments.append(("en", part))
elif part.strip():
segments.append(("ru", part))
return segments