Во многих ситуациях слепым людям не обязательно видеть то, что они держат в руках, им просто нужно, чтобы им это описали. Новое экспериментальное носимое устройство, известное как AiSee, предназначено именно для этой цели.
Разработанный за последние пять лет группой ученых из Национального университета Сингапура, AiSee выглядит как обычный набор наушников с костной проводимостью, соединенных ремешком, который опоясывает шею пользователя сзади. Целью этой технологии является то, чтобы пользователи не чувствовали себя неловко, как это могло бы произойти, если бы они носили что-то более заметное, например специальные «умные очки».
Один из наушников оснащен фронтальной 13-мегапиксельной камерой, которая захватывает поле зрения пользователя, а другой имеет интерфейс сенсорной панели на внешней поверхности. Микропроцессор и литиевая батарея расположены в задней части устройства, которое подключено к Интернету по беспроводной сети.
Гарнитура AiSee наряду с некоторыми продуктами, которые она в настоящее время может идентифицироватьНациональный университет Сингапура
Когда пользователь берет в руки предмет (например, когда он идет в магазин за продуктами), он фотографирует его с помощью встроенной камеры. Это изображение обрабатывается в режиме реального времени с помощью облачных алгоритмов искусственного интеллекта, которые анализируют такие данные, как форма, размер и цвет предмета, а также любой текст, напечатанный на его этикетках.
При совпадении обнаружен известный объект, пользователю сообщается, что это такое, посредством синтетического голоса в наушниках. Если им потребуется дополнительная информация, они просто спросят устно — надеюсь, ИИ узнает и предоставит ответ.
Важно отметить, что AiSee не нужно подключать к смартфону или любому другому устройству, что делает все намного проще. Кроме того, поскольку наушники с костной проводимостью фактически не закрывают уши, пользователи по-прежнему могут слышать окружающий мир.
Ученые сейчас работают над тем, чтобы сделать эту технологию более доступной и эргономичной, а также надеемся повысить скорость обработки и улучшить алгоритмы распознавания объектов.
«В настоящее время люди с нарушениями зрения в Сингапуре не имеют доступа к вспомогательным технологиям искусственного интеллекта такого уровня сложности», — сказал ведущий ученый, доц. . Профессор Суранга Нанаяккара. «Поэтому мы считаем, что AiSee обладает потенциалом, позволяющим слабовидящим людям самостоятельно выполнять задачи, которые в данный момент требуют помощи».
Устройство продемонстрировано на видео ниже.
AiSee: «глаз» на базе искусственного интеллекта, позволяющий слабовидящим людям «видеть» объекты.
