В Массачусетском технологическом институте Париж Смарагдис разрабатывает системы, которые слышат и понимают звук лучше человека. По визгу шин и скрежету металла такие алгоритмы способны оперативно указать место дорожной аварии. Об этом пишет портал Science XXI.
Свой подход профессор сравнивает с компьютерным зрением, только перенесённым на слух. Он числится в программе музыки и театрального искусства, на кафедре электротехники и компьютерных наук, а также в Колледже вычислений имени Стивена Шварцмана. Возглавляемая им группа изучает разделение звуковых источников методами машинного обучения и создаёт инструменты для анализа, изменения и сочинения музыки.
Родом учёный из Греции, с детства учился играть на классической гитаре. Синтезатор, принесённый отцом, открыл ему возможность конструировать собственные звуки. Позже была учёба в колледже Беркли в Бостоне, где он осваивал компьютеры и синтезаторы, а главным инструментом выбрал бас-гитару и увлёкся джаз-фьюжном.
Вместе с Ричардом Буланже, профессором электронной звукорежиссуры, он делал средства для компьютерного сочинения и обработки музыки. Затем начался проект с Барри Верко из Медиалаборатории MIT — там Смарагдис прошёл магистратуру, докторантуру и постдокторантуру. Верко умер в 2025 году. В лаборатории многие работали с обработкой сигналов, а он взялся за менее изученное машинное обучение.
После этого были исследовательские лаборатории Mitsubishi Electric с системами ИИ для анализа звуковых дорожек видео и команда аудиоисследований в Adobe. В Иллинойсском университете в Урбане-Шампейне его группа разработала нейросетевые методы разделения звуков в смешанных записях. Это помогло очистить архивные плёнки для документального сериала «The Beatles: Get Back» 2021 года, а в 2022-м команда получила «Эмми» за монтаж звука.
С 2025 года Смарагдис работает в MIT. Сейчас он делает инструменты для музыкантов и базовые алгоритмы обработки аудио, изучает применение больших языковых моделей к распознаванию речи. Компьютер, по его словам, должен расширять возможности музыканта, а не подменять его. В свободное время учёный играет на бас-гитаре, занимается подводным хоккеем и тренирует команду, рассчитывая возродить институтский клуб этого вида спорта.