Очень часто при создании музыки требуется изолировать один из каналов, к примеру, убрать вокал или басы. Однако, по большей части это дорого и неэффективно. Разработчики популярного стримингового сервиса Deezer представили обучающуюся нейросеть, способную совершить революцию в музыкальной индустрии.
Программисты выпустили в свободный доступ программу Spleeter с открытым исходным кодом. Она построена на Python и TensorFlow и использует машинное обучение для быстрого разделения музыки на различные каналы.
Скачав полностью готовое к работе ПО, пользователь получит доступ к библиотеке, которая на данный момент предоставляет следующие возможности:
- Разделение двух каналов аудио — вокал и любое другое сопровождение.
- Разделение четырёх каналов аудио — вокал, ударные, бас, другие.
- Разделение пяти каналов аудио — вокал, ударные, бас, фортепиано, другие.
Как сообщают уже установившие эту программу пользователи, обработка аудио происходит очень быстро. Так, для разделения 5,5-минутного трека на пять каналов требуется порядка трёх минут. Что до результатов, то по мнению экспертов, уже сейчас они превосходят всё, что было создано другими разработчиками. Даже если сравнивать программу с платными инструментами, которые берут по 4 доллара за обработку одной песни, у Spleeter выходит гораздо лучше.
Что интересно, разработчики не планируют брать за своё приложение денег. Тем не менее, они просят каждого кто будет ей пользоваться, подходить к этому делу ответственно, понимая и ценя чужой труд и интеллектуальную собственность. По ссылке можно послушать больше примеров разделения треков.
Источник:
Диджеям это очень нужно, иначе приходится глушить музыку бассами, что не очень качественно
бассссами. :)
Ну любителям музыки... Иногда хочеться послушать трек без вокала допустим.
скорее любителям караоке. :)
Есть такие треки, где композитор от души поработал, написал убойный трек, а вокал всё испоганил: убогим пением через кампухтер или тупыми до невозможности словами. Или и то, и другое вместе. Ну а я, после прочтения этой новости, пожалел, что не записал названия тех треков.
Да для караоке вообще вещь, можно ещё одновременно обучить распознавать или качать с инета тексты песен, то есть создать комбайн для трансформации песни в караоке версию и даже оставить на всякий случай дорожку с приглушоным вокалом, если нужен для тренировки или дуэта
Гитаристам, басгитаристам, барабанщиками и тем же вокалистам
Всем нужно. Обучить эту софтину отделять любые другие звуки, и можно наслаждаться шумодавами совершенно другого уровня, нежели сейчас. Голосовые помощники будут работать гораздо более качественно. Применений программе можно найти массу
Вам бы учебник по грамматике.
Песни Скриптонита и это не поможет разобрать
А остальным нафик Biopsyxoz ?
а кто это?
Как бы нет никаких проблем с текстами Биопсихоза, всё и так прекрасно слышно, если уши, так скажем, натренерованны на тяж. музыку, да и у Сергея на сайте вроде всё есть, ну на крайняк в оф. группе ВК в обсуждениях вроде что-то было.
github.com в помощь)
ну от туда скачал кучу папок и файлов, а как установить/запустить не пойму, прошу помощи.
Читайте реадми.мд. Там все написано.
Скачивать нужно Izotope Rx7,там всё есть, называется Music Rebalanced по моему
Нейросеть можно научить чему угодно. Вопрос только во времени и ресурсах.
Да, одночастотные инструменты все равно давит и начинает звучать как 15 кбитный трек
#define ИИ "Нейронная сеть"
Лол
Что лол?
Да в rx рабоатю вот как этот плагин запустить и из под чего он работает, скачал, а что делать с ней то.
из под питона, читай ридми, как ты вообще работаешь в RX если даже с этой утилиткой разобраться не можешь
Спокойно работаю, я не просто не углублялся.
Да, есть платный сайт phonicmind, и xtras stems программа.
В Rx все руками надо делать)