Контекст публикации. Архивная заметка февраля 2024 года о демонстрации роботизированной уборки. Возможность выполнить отдельное действие не доказывает готовность решения к любой бытовой ситуации.
Новая система помогает роботам ориентироваться в домах, которые они никогда раньше не видели, с небольшой помощью open-source моделей ИИ (искусственного интеллекта).
Роботы успешно справляются с определенными задачами, такими как подъем и перемещение предметов или даже приготовление пищи. Однако в условиях неизвестной среды с малым количеством данных это становится проблемой.
Новая система под названием OK-Robot может научить роботов работать в условиях, с которыми они не сталкивались ранее, что может помочь сократить разрыв между ИИ и фактическими возможностями роботов, поскольку не требует дополнительного дорогостоящего и сложного обучения.
Исследователи из Нью-Йоркского университета и Meta протестировали Stretch, коммерческого робота Hello Robot, в десяти комнатах пяти различных домов. В рамках исследования ученый провел эксперимент с роботом внутри закрытого помещения, используя приложение Record 3D для iPhone, поддерживающее LiDAR, для записи 3D видео. Он планировал передать это видео роботу через приложение. Робот, используя модели обнаружения открытых объектов и алгоритмы ИИ, проанализировал видео и обнаружил определенные предметы в комнате, такие как дракон, тюбик зубной пасты и карты. Он также обнаружил расположение различных объектов в комнате.
Затем система OK-Robot запустила модель обнаружения объектов с помощью модели ИИ на кадрах видео. Это, в сочетании с другими open-source моделями, помогло роботу идентифицировать объекты в этой комнате, такие как игрушечный дракон, тюбик зубной пасты и колода игральных карт, а также расположение по всей комнате, включая стул, стол и мусорное ведро.
Недавний бум искусственного интеллекта привел к огромным скачкам в области языка и возможностей компьютерного зрения, предоставив исследователям робототехники доступ к моделям и инструментам open-source ИИ, которых не существовало еще три года назад.
Источник: Telegram LifeaaS
Демонстрация робота ещё не означает готовую сервисную модель. Разницу между устройством и услугой разбирает материал «Робот по подписке».