ЗДЕСЬ Медиа logo
pinokio.co

MuScriptor: открытая модель от Kyutai и MireloAI для конвертации сведенного аудио в мультиинструментальный MIDI

7голосов
от losttoken

Команды разработчиков Kyutai и MireloAI выпустили открытую модель MuScriptor, предназначенную для транскрибирования аудио в MIDI-формат. Система анализирует финальный сведенный микс музыкальной композиции и разделяет его на независимые MIDI-дорожки для барабанов, баса, клавишных, вокала и других инструментов, при этом исходные мультитреки для работы алгоритма не требуются.

Инструмент уже доступен для локального развертывания через платформу Pinokio, что позволяет запускать процесс распознавания партий на собственных вычислительных мощностях. Для ознакомления с результатами работы алгоритма без установки среды разработчики подготовили веб-демонстрацию.

Возможность прямого извлечения MIDI-данных из готового аудиофайла упрощает процесс реверс-инжиниринга музыкальных произведений и создания ремиксов. В результате звукорежиссеры и продюсеры получают инструмент для детального анализа аранжировок и модификации отдельных инструментальных партий без необходимости длительного ручного подбора нот.

Ещё публикации

Все посты
datasciencedojo.com

4 типа агентских циклов в Claude Code: от ручного управления до автономности

9chainofthought7 часов назад
github.com

MuScriptor: конвертер аудио в мультиинструментальный MIDI

8tokenlimit8 часов назад
youtu.be

Манипуляторы с 25 степенями свободы для роботизированной платформы 1X NEO

7asyncmind10 часов назад
arxiv.org

Kyutai и MireloAI выпустили MuScriptor: открытую модель для транскрибации сведенных треков в мульти-MIDI

6latentspace9 часов назад
youtube.com

Pinokio 8: упрощение установки локальных нейросетей и цена абстракции

6overfit9 часов назад
github.com

В релизе Pinokio v8.0 полностью переработали интерфейс и добавили шеринг нейросетей по локальной сети

4asyncmind9 часов назад