Профессор MIT разрабатывает ИИ для распознавания звуков аварий и поломок
Профессор Массачусетского технологического института Париж Смарагдис работает над системами, которые способны слышать и интерпретировать звуки с большей точностью, чем человек. Эти технологии могут быстро идентифицировать место дорожной аварии по звукам визга шин и скрежета металла. Кроме того, они могут распознавать признаки потенциальной поломки промышленного бура во время бурения плотных пород для строительства геотермальных скважин. Об этом сообщает издание Science XXI.
«Я люблю говорить, что занимаюсь тем же, чем специалисты по компьютерному зрению, но в контексте слуха», — отметил Смарагдис, который является профессором программы музыки и театрального искусства, кафедры электротехники и компьютерных наук, а также Колледжа вычислений имени Стивена Шварцмана. Его команда исследует методы разделения звуковых источников с использованием машинного обучения, разрабатывает интеллектуальные устройства для улучшения слухового восприятия и инструменты для понимания, анализа, изменения и создания музыки.
Смарагдис родился в Греции и с детства увлекся игрой на классической гитаре. Интерес к новым звукам возник после того, как его отец принес домой небольшой синтезатор: «У него была функция, позволяющая создавать собственные звуки, и я был полностью очарован этими возможностями». Позже он поступил в музыкальный колледж Беркли в Бостоне, где изучал использование компьютеров и синтезаторов, выбрав основной специальностью бас-гитару и заинтересовавшись джаз-фьюжном.
Во время учебы он вместе с профессором электронной звукорежиссуры Ричардом Буланже разрабатывал инструменты для компьютерного сочинения, записи и обработки музыки. Затем Смарагдис начал совместный проект с профессором Барри Верко из Медиалаборатории MIT, который скончался в 2025 году, а позже завершил магистратуру и докторантуру в его группе и прошел постдокторантуру. Именно тогда его интерес сместился от создания музыки к разработке компьютеров, способных распознавать звук.
Эпидемия Эболы в Конго охватила семь провинций и продолжает расширяться в ДРК. В Медиалаборатории многие исследователи использовали методы обработки сигналов, однако Смарагдис выбрал менее изученное направление — машинное обучение. После постдокторантуры он работал в исследовательских лабораториях Mitsubishi Electric, разрабатывая системы искусственного интеллекта для анализа звуковых дорожек видео, а затем создал в Adobe команду аудиоисследований. В Иллинойсском университете в Урбане-Шампейне его группа разработала нейросетевые методы разделения отдельных звуков в смешанных записях, что позволило очистить архивные записи для документального мини-сериала 2021 года «The Beatles: Get Back» и принесло команде премию «Эмми» за монтаж звука в 2022 году.
В 2025 году Смарагдис присоединился к MIT. В настоящее время его группа разрабатывает инструменты для музыкантов и основные методы обработки аудио, включая алгоритмы без фиксированных частот дискретизации, размеров кадров и контекстных окон, а также исследует применение больших языковых моделей для распознавания речи и улучшения звука. «Мы стремимся расширить набор инструментов музыканта, а не заменить его компьютерами», — добавил ученый. В свободное время он играет на бас-гитаре, занимается подводным хоккеем и тренирует команду; по данным сайта MIT, Смарагдис также надеется возродить клуб подводного хоккея в институте.
