Polymath

Polymath превращает музыкальную библиотеку в доступный для поиска и синхронизированный по ритму набор инструментов для продакшена. С помощью конвейера моделей машинного обучения с открытым исходным кодом сервис выделяет отдельные звуковые элементы из готовых миксов, определяет и нормализует темп композиций, распознаёт их структуру и тональные характеристики, а также напрямую преобразует аудио в MIDI для творческой обработки и повторного использования.

Ключевые возможности

• Разделение на стемы с помощью нейросетей Demucs точно выделяет ударные, бас, вокал и другие инструменты
• Преобразование аудио в MIDI переносит мелодии и гармонии в редактируемый формат для создания новых аранжировок
• Автоматическое определение темпа и изменение длительности синхронизируют библиотеки семплов с единой ритмической сеткой
• Анализ музыкальной структуры автоматически определяет секции, тональности и тональное содержание
• Бесплатный открытый исходный код и поддержка Docker для воспроизводимых бессерверных конвейеров обработки

Polymath избавляет от трудоёмкой ручной подготовки аудио при организации наборов семплов, создании мэшапов и экспериментах с генеративной музыкальной композицией. Его можно использовать как библиотеку Python для интеграции или через интерфейс командной строки. Полностью бесплатен по лицензии MIT.