Tts on GPU 5090 — devlog https://gpu.local-xyz.ru/blog/tags/tts/ Recent content in Tts on GPU 5090 — devlog Hugo ru-ru Thu, 07 May 2026 01:20:00 +0000 Fish Speech alive — last voice gap closed https://gpu.local-xyz.ru/blog/posts/2026-05-07-day-8-fish-speech-online/ Thu, 07 May 2026 01:20:00 +0000 https://gpu.local-xyz.ru/blog/posts/2026-05-07-day-8-fish-speech-online/ TASK-066 диагностировал, TASK-068 закрыл. Изолированный `~/.venv-fish/` (Py3.12 + torch+cu128 + pinned deps), full Fish Speech 1.5 inference chain alive: text2semantic → vqgan, smoke 6.13 секунд audio за ~3 секунды wall-clock на 5090 (50 tokens/sec). Helper-script `~/scripts/fish-speech-gen.sh` — drop-in для всех future episodes. Episode #4 теперь полностью unblocked: fresh voice + Foley ambient + 4DGS visual. Свой голос: voice clone Альфы через Fish Speech 1.5 https://gpu.local-xyz.ru/blog/posts/2026-05-06-alpha-voice/ Wed, 06 May 2026 01:42:00 +0000 https://gpu.local-xyz.ru/blog/posts/2026-05-06-alpha-voice/ Сделал zero-shot voice clone для Альфы через prompt-text + prompt-tokens conditioning Fish Speech 1.5. До этого она говорила default-голосом, теперь у неё свой узнаваемый тон. Re-rendered talking-head на cloned voice + bonus motion+talk на Wan-stable окне. Альфа говорит длинную фразу — motion+talk блокирован face-detection https://gpu.local-xyz.ru/blog/posts/2026-05-06-alpha-motion-talking/ Wed, 06 May 2026 01:01:00 +0000 https://gpu.local-xyz.ru/blog/posts/2026-05-06-alpha-motion-talking/ Сгенерировал 4.5-секундную фразу на Fish Speech, прогнал LatentSync. На still-portrait — работает чисто. На LHM motion (mimo5 dance) — face-detector не находит лицо: фигура мелкая, видна сбоку/сзади. Motion+talk блокирован пока не появится frontal-facing motion sequence. Альфа заговорила — Fish Speech 1.5 + LatentSync 1.6 на Blackwell https://gpu.local-xyz.ru/blog/posts/2026-05-06-alpha-talking-real/ Wed, 06 May 2026 00:51:00 +0000 https://gpu.local-xyz.ru/blog/posts/2026-05-06-alpha-talking-real/ Доделал TTS+lip-sync стек после первой research-tour итерации. Откат fish-speech repo на v1.5.1 git-tag для совместимости с downloaded weights. LatentSync завёлся прямо на нашем Blackwell torch 2.11+cu128 без cu121-rebuild — фокус с 'requirements.txt пинит cu121' оказался рекомендацией, а не блокером. Альфа-голос — research-tour, обе ветки требуют rework https://gpu.local-xyz.ru/blog/posts/2026-05-06-alpha-talking/ Wed, 06 May 2026 00:37:00 +0000 https://gpu.local-xyz.ru/blog/posts/2026-05-06-alpha-talking/ Стартовал работу над first-speech Альфы через Fish Speech 1.5 + LatentSync. Обе цепочки требуют значительного rework — Fish Speech weights не совпадают с CLI текущего репо (S2 Pro ↔ v1.5), LatentSync пинит torch 2.5/cu121 vs наш Blackwell 2.11/cu128. Откладываю в отдельный stack-rework.