Объединив оборудование Nvidia Jetson с компьютерным зрением на базе YOLO, он сократил задержку до 17 мс и повысил свой результат в Aimlabs на 63%.
Роботизированный экзоскелет-помощник для прицеливания, разработанный компанией «Basically Homeless»
По сути бездомный YouTube
Когда дело доходит до необычных инженерных проектов, Ник Зетта создал себе собственную репутацию.
Пользователь YouTube, более известный как Basically Homeless, представил роботизированный экзоскелет, предназначенный для улучшения прицеливания в популярной тренировочной программе Aimlabs.
Устройство сочетает в себе зрение искусственного интеллекта, двигатели и напечатанные на 3D-принтере детали, которые физически направляют запястье и пальцы.
Зетта начала проект после того, как почувствовала, что застряла на отметке 135 000 в Aimlabs.
Он задался вопросом, сможет ли робототехника улучшить его производительность. Конструкция включала в себя моторизованный помощник запястья, соленоидный «экзоскелет, реагирующий на щелчки пальцев» и систему машинного зрения на основе искусственного интеллекта для обнаружения целей.
Первые испытания прошли не гладко.
В начале прогонов точность снизилась на 20%, поскольку Зетте было сложно подчиниться системе и контролировать его движения. Адаптировавшись, он зафиксировал небольшое улучшение на 3% по сравнению со своим лучшим результатом.
Затем он начал оптимизировать аппаратное обеспечение. Видеокарта Nvidia Jetson использовалась для реализации специальной модели компьютерного зрения YOLO.
Задержка сократилась с 50 до всего лишь 17 миллисекунд, практически мгновенно. Он увеличил напряжение двигателя, сделав систему более мощной и способной управлять рукой, даже преодолевая сопротивление.
Результаты быстро улучшились. В одном запуске прирост составил 12%, затем 28%, 43% и, наконец, 63%. Это позволило Zetta занять второе место в глобальном рейтинге Aimlabs.
Как работает экзоскелет
Устройство крепится к предплечью с помощью шарниров, напечатанных на 3D-принтере. Кевларовые стропы и карданные двигатели управляют запястьем, а соленоиды обрабатывают нажатия пальцев.
Высокоскоростная камера с глобальным затвором передаёт данные в систему искусственного интеллекта. Компьютер распознаёт цели и даёт команды двигателям для регулировки положения руки и запястья в режиме реального времени.
Эта конструкция действует как физический аимбот. В отличие от традиционных программных читов, этот экзоскелет изменяет реальные движения рук.
Соревновательные испытания продемонстрировали точность системы. Она обеспечивала быстрое обнаружение цели и стабильную помощь в прицеливании. Проект размыл грань между человеческим мастерством и машинной коррекцией.
Зетта признал необходимость обучения. Ему пришлось расслабить запястье и позволить моторам взять управление на себя. После того, как он приспособился, экзоскелет заработал как надо.
Будущий потенциал
Проект действительно поднимает некоторые вопросы о честности игр. Разные игроки по-разному относятся к помощи при прицеливании и внутриигровым хакам, но большинство склоняется к тому, чтобы соревновательные игры были максимально честными.
Проблема с аимботами существует с 1990-х годов, но разработчики борются с ними с помощью программного обеспечения. С другой стороны, физические вспомогательные устройства сложнее обнаружить.
Зетта представил проект как «экзоскелет, защищающий от мошенничества». Несмотря на юмористический дизайн, проект продемонстрировал серьёзный инженерный потенциал.
Но это ещё не всё: в видео он также намекнул на возможные дальнейшие перспективы. Он предположил, что если объединить систему с некоторыми нейромышечными элементами, результаты могут быть ещё лучше.
Он не вдался в подробности, но эта идея оставляет место для чего-то гораздо более амбициозного, чем помощь при прицеливании.
На данный момент экзоскелет остаётся одновременно и комедийным эпизодом, и ярким доказательством концепции. Он доказывает, что сочетание робототехники, искусственного интеллекта и механического дизайна может вывести человеческие рефлексы далеко за пределы их естественных возможностей.
Sourse: interestingengineering.com
