Този инструмент за изкуствен интелект с отворен код бързо изолира вокалите във всяка песен
Перфектен за направата на караоке бек писти и каша
Разделянето на песен на отделни вокали и инструменти винаги е било главоболие за продуцентите, диджеите и всички останали, които искат да играят с изолирано аудио. Имамного начинида го направите, но процесът може да отнеме много време и резултатите често са несъвършени. Нов инструмент за изкуствен интелект с отворен код прави тази трудна задача по-бърза и лесна.
Софтуерът се нарича Spleeter и е разработен от услугата за поточно предаване на музика Deezer за изследователски цели. Вчера компанията го пусна катопакет с отворен код, поставяне на кодаGithubза всеки, който да изтегли и използва. Просто подайте Spleeter аудио файл и той spleets го разделя на две, четири или пет отделни аудио записи, известни като стъбла. Резултатите не са перфектни, но са изключително използваеми, а самият Spleeter е много бърз. Когато работи на специален графичен процесор, той може да разделя аудио файлове на четири стъбла 100 пъти по-бързо от реалното време.
Можете да слушате пример за софтуера, работещ по Промените на Дейвид Боуи по-долу. Има няколко аудио артефакта както в гласовите, така и в само лентовите основи, но общите резултати са фантастични. И ако Боуи не е вашето нещо, етодруг пример за Сплитърза онази вечна балада за любов и загуба: Скатман (Ски-Ба-Боп-Ба-Доп-Боп).
Технологът Анди Байо написа отличноблог постза Сплитър с много свои примери. Байо казва, че изолираните вокали, произведени от софтуера, понякога получават роботизирано усещане, но количеството на кървенето е шокиращо ниско в сравнение с други решения. Можете да слушате пример, генериран от Baio по-долу със Spleeter, работещ на Marvin Gaye’s I Heard It Through the Grapevine. (Но определено щракнете върху оригиналния му пост, ако искате да чуете по-изолирани вокални парчета от Lil Nas X, Lizzo, Led Zeppelin и други.)
рекламни игриМарвин Гай - чух го през лозата
Марвин Гай (само вокали)
огнена емблема ios
Марвин Гай (само за музика)
Байо посочва, че Сплитър също ще бъде много полезен за всеки, който иска да създаде каша, тъй като се демонстрира с нечестив съюз наПриятелитематична мелодия („Ще бъда там за теб от Рембрандс“) с текста на Billy Joel’s We Did not Start the Fire.
никой не трябва да има такъв вид властpic.twitter.com/4vbl2MGK4Z
- Анди Байо (@waxpancake)5 ноември 2019 г.
Този инструмент изглежда изключително способен, но бъдете предупредени: ще ви е необходим известен технически опит, за да го използвате. Освен ако не играете редовно със софтуер като Python или инструментариума за изкуствен интелект на Google TensorFlow (който е използван за обучение на Spleeter), ще трябва да изтеглите няколко програми, за да стартирате всичко.Ище ви е удобно да използвате въвеждане от командния ред (макар и много просто) вместо по-достъпен визуален интерфейс.
Deezer отбелязва, че това не е първият път, когато хората използват машинно обучение за автоматизиране на тази задача и че постиженията на компанията се основават на много по-ранни изследвания. Говорейки сНа ръбапо имейл, главният директор по данни и проучвания на Deezer Aurelien Herault казва, че компанията е обучила своя софтуер на 20 000 музикални парчета с предварително изолирани вокали в редица жанрове. От тази информация софтуерът се научи как да изолира самите писти.
Като цяло, Spleeter е друг фантастичен пример за това как инструментите за изкуствен интелект могат да опростят неподходящите части от творческата работа. В момента машинното обучение се използва за автоматизиране на редица отнемащи време задачи, отпремахване на фонове на снимкидо мащабиране на текстури в стари видеоигри. И все повече тези инструменти се включват в потребителския софтуер, от Photoshop на Adobe до нови претенденти като Runway ML.
Хитлер извънземен
Deezer казва, че не планира да превърне Spleeter в потребителски инструмент, но други биха могли да се възползват от работата си и да му удрят обикновен интерфейс. Очевидните приложения са за диджеи и продуценти, които искат да интегрират изолирани вокали в миксове, или за хора, които искат да създадат бекбрейк песни за караоке от домашно пиво. (Такива дейности може да не са в съответствие със закона за авторското право в зависимост от начина на разпространение на крайния продукт.)
Самият Deezer използва Spleeter за редица изследователски приложения, които помагат за подобряване на услугата му за стрийминг. Вътрешно го използваме като инструмент за предварителна обработка за сложни изследователски задачи като музикална категоризация, транскрипция и откриване на език, казва Херо.
Или, разбира се, можете просто да го използвате, за да се справите по-добре със Scatman. Ski-bi dibby dib yo da dub dub.
