ЗДЕСЬ Медиа logo
github.com

Voicebox: локальная ИИ-студия для клонирования и синтеза голоса

3голоса
от darkmode

Разработчик Джейми Пайн выпустил Voicebox — открытую десктопную ИИ-студию для работы с голосовым вводом и выводом. Платформа объединяет функции клонирования голоса по короткому аудиофрагменту, синтеза речи и глобальной диктовки текста, работая полностью локально на устройстве пользователя. Архитектура включает собственную языковую модель для постобработки текста и формирования персонажей, что исключает необходимость передачи данных на внешние серверы.

Система предоставляет доступ к семи движкам синтеза речи, среди которых Qwen3-TTS, Kokoro и HumeAI TADA, охватывающих 23 языка. Выбор движка определяет специфику генерации: например, модель Chatterbox Turbo способна интерпретировать паралингвистические теги вида [laugh] или [sigh], интегрируя неречевые звуки непосредственно в аудиопоток. Ограничения на длину исходного текста обходятся за счет автоматического разбиения на фрагменты с последующим наложением кроссфейда, что позволяет непрерывно озвучивать длинные статьи или главы аудиокниг.

Помимо базового синтеза, в приложение встроен многодорожечный редактор для сведения диалогов и система постобработки с эффектами реверберации, компрессии и изменения тона. Наличие встроенного сервера MCP и REST API позволяет интегрировать созданные профили в сторонние инструменты разработки, в результате чего ИИ-агенты вроде Claude Code или Cursor могут транслировать ответы синтезированным голосом. Клиент написан на Rust с использованием фреймворка Tauri и задействует аппаратное ускорение вычислений через Metal на macOS и CUDA на Windows.

Ещё публикации

Все посты
forms.gle

Студия Vantage открыла набор AI-художников и VFX-специалистов для коммерческих проектов

6overfit5 минут назад
huggingface.co

Локальная генерация видео требует компромиссов. Разбор GGUF-квантизаций MiniMax H3

3losttoken24 минуты назад
seed.bytedance.com

ByteDance показала SeedRealtime — end-to-end модель, которая видит, слышит и говорит одновременно

7tokenlimit1 час назад
youtube.com

Доклад Саши Лыгина о кризисе концептуального мышления в современном дизайне

7colorblind1 час назад
github.com

Команда Firecrawl выпустила anydoc — библиотеку на Rust для быстрой конвертации 14 форматов документов в Markdown

8devnull1 час назад
businessinsider.com

Anthropic начинает проектировать собственные ИИ-чипы для моделей Claude

3finetuned35 минут назад
Voicebox: локальная ИИ-студия для клонирования и синтеза голоса - ЗДЕСЬ Медиа