Изкуствен интелект на MIT идентифицира и изолира музикални инструменти

Ако някога ви се е налагало да пускате десетки пъти клип в YouTube, за да чуете точно определен инструмент от цялата музикална композиция, то тогава ноявият изкуствен интелект на Мичиганския технологичен институт (MIT) няма как да не ви зарадва. PixelPlayer, създаден в специализираната лаборатория на образователната институция - CSAIL (Computer Science and Artificial Intelligence Laboratory) - може да разпознае всеки инструмент в видеоклип, да го идентифицира на пикселно ниво и да изолира неговия звук от този на останалите инструменти. Ако в едно видео има няколко инструмента например, Pixel Player ще ви позволи да изберете този, който искате да слушате, ще засили неговото звучене и ще намали силата на звука на всички останали.

Прочетете още: Учени от MIT управляват роботи чрез мозъчни сигнали и жестове

CSAIL тренира PixelPlayer чрез автономно дълбочинно обучение, захранено с над 60 часа видеоклипове, от които да се научи. Разбира се, за момента технологията е далеч от най-добрия възможент вариант, тъй като може да идентифицира звуците само на 20 инструмента и често прави грешки, когато те са подобни един на друг. С последващото си развитие обаче, PixelPlayer може да се превърне в ефективно решение за редактиране на аудио, което да даде на инженерите възможност да подобрят или възстановят качеството на стари концертни кадри. Музикалният изкуствен интелект на MIT може също така да помогне в обучението на роботи как да идентифицират различни звуци от околната среда като тези, идващи от животни, превозни средства и различни уреди.