Наушники с шумоподавлением отлично помогают заглушить громких говорящих и хаотичные кафе мира, но что, если есть определенные звуки, которые вы хотели услышать? Именно здесь вскоре может появиться экспериментальная новая система «семантического слуха».
В настоящее время разрабатываемая учеными Вашингтонского университета технология включает в себя алгоритмы глубокого обучения, работающие на смартфоне, подключенном по беспроводной сети к телевизору. сторонних наушников с шумоподавлением.
Окружающий звук передается с микрофонов наушников, отслеживающих шум, в приложение на телефоне, где он подвергается цифровой фильтрации, чтобы блокировать большинство звуков, но позволяет слушателю услышать лишь некоторые из них. И наоборот, он также может блокировать избранные нежелательные звуки, пропуская при этом все остальные. В настоящее время существует 20 таких разрешенных и/или блокируемых вариантов звука.
По крайней мере, на данный момент смартфон обязательно должен быть частью пакета. Это связано с тем, что электроника в самих наушниках или на облачном сервере не будет достаточно мощной и быстрой.
«Понимание того, как звучит птица, и выделение его из всех других звуков в окружающей среде требует интеллекта в реальном времени, чего не могут достичь современные наушники с шумоподавлением», — сказал профессор Шьям Голлакота, старший автор статьи об исследовании. «Проблема в том, что звуки, которые слышат пользователи наушников, должны синхронизироваться с их зрительными ощущениями. Вы не можете услышать чей-то голос через две секунды после того, как они с вами разговаривают. Это означает, что нейронные алгоритмы должны обрабатывать звуки менее чем за сотую долю секунды». «
При тестировании на 22 добровольцах в таких местах, как парки, улицы и офисы, система семантического слуха успешно извлекала целевые звуки, такие как щебетание птиц, сигналы тревоги и сирены. Однако определенная работа все еще необходима, поскольку технология с трудом различает похожие звуки, такие как человеческая речь и пение.
Вы можете сами услышать эффекты системы семантического слуха на видео ниже.
А если вы просто не можете дождаться коммерциализации этой технологии, вы можете попробовать существующее устройство, известное как SoundBrake. Хотя он не фильтрует определенные типы звуков, он фильтрует звуки по их громкости.
Семантический слух: будущее интеллектуальных наушников
