Забудьте об умных домах. Возможно, в будущем этот робот будет управлять вашим домом.
Черный робот с моделью Vision-Language-Action (VLA) для выполнения сложных задач по развешиванию рубашки на вешалке.
ByteDance Seed
Китай является пионером в разработке робототехники с использованием искусственного интеллекта с тех пор, как эта технология начала набирать популярность во всем мире. Уже выпустив роботов различного назначения, страна готовится добавить ещё одного.
Материнская компания TikTok, ByteDance, представила роботизированную систему с использованием искусственного интеллекта, которая может снизить физическую нагрузку на дому.
Эта система позволяет роботам выполнять домашние задачи, такие как развешивание белья и уборка столов.
Модель, которая заставляет все работать
Роботизированная система интегрирована с GR-3 — крупномасштабной моделью зрения и действия, которая наделяет роботов способностью следовать командам естественного языка и выполнять общие задачи.
Для этого эксперимента ByteDance использовала своего лабораторного двуручного мобильного робота ByteMIni. После интеграции с GR-3 робот вставил вешалку в рубашку и повесил её на стойку, как показано на видео.
Команда разработчиков ByteDance также раскрыла расширенные возможности GR-3 в отдельном техническом отчёте. Согласно отчёту, робот справился с одеждой с короткими рукавами, хотя вся одежда в данных для обучения была с длинными рукавами.
Система также смогла подобрать несколько предметов и разместить их в указанном месте. Система также идентифицировала объекты не только по их названиям, но и по размеру, например, «большая тарелка», или по пространственным командам, например, «слева».
Более того, он полностью выполнил задачу по «уборке обеденного стола» всего одним нажатием кнопки. Действия робота служат напоминанием о том, как человечество уверенно движется к возможности интеграции роботов в свою повседневную жизнь.
Обучение модели
ByteDance обучал модель, используя комплекс методов: он объединял большие объемы изображений и текстовых данных, настраивал ее с использованием данных от людей, взаимодействующих в виртуальной реальности, а также обучал ее, копируя движения реальных роботов.
«Мы надеемся, что GR-3 станет шагом на пути к созданию универсальных роботов, способных помогать людям в повседневной жизни», — заявила команда.
Этот проект представляет собой большую победу для отдела Seed, который отвечает за исследования в области искусственного интеллекта и разработку крупных языковых моделей. Отдел был создан в 2023 году, после запуска ChatGPT от OpenAI в ноябре 2022 года.
В центре внимания — ИИ и ближайшее будущее
Внимание ByteDance к ИИ не осталось незамеченным: команда Seed уже открыла более 15 вакансий, связанных с робототехникой и воплощенным интеллектом. Соучредитель компании Чжан Имин также регулярно ездит в Пекин, чтобы руководить исследованиями и разработками в области ИИ.
И хотя будущее в этом направлении выглядит светлым, TikTok уже столкнулся с новой угрозой запрета со стороны президента Дональда Трампа, который призвал китайскую компанию завершить выбор организации из числа потенциальных покупателей платформы в Америке.
США уже давят на ByteDance, требуя продать американские активы TikTok, опасаясь, что Китай может использовать платформу для слежки и кампаний по дезинформации.
Хотя будущее TikTok висит на волоске, можно с уверенностью сказать, что ByteDance по-прежнему стремится к пионерам инноваций в области робототехники и искусственного интеллекта, которые могут изменить будущее.
Sourse: interestingengineering.com
