Разработана система для управления гуманоидным роботом с помощью камеры

Система использует обучение с подкреплением, искусственное моделирование и обширные наборы данных о движениях человека для распознавания действий и обучения робота.

Исследователи из Университета Карнеги-Меллона разработали систему для телеуправления гуманоидными роботами в режиме реального времени. Программа контролирует движения оператора только с помощью камер, использует обучение с подкреплением, масштабируемый ретаргетинг и обширные наборы данных о движениях человека для беспрерывного совершенствования и точного распознавания движений.

Используя обычную камеру RGB без дополнительных костюмов или датчиков, люди
могут дистанционно управлять полноразмерными гуманоидными роботами, заставляя их выполнять разнообразные действия. Метод подойдет и для простых задач — выбрать предмет и переместить его, и для динамических движений, например, ходьбы или бокса.

Полный контроль над крупными гуманоидами при телеуправлении давно является проблемой в робототехнике. Сложность возрастает при попытке заставить робота имитировать произвольные человеческие движения в реальном времени.

Разработанная инженерами система «Человек — гуманоид» — это масштабируемая система, основанная на обучении, которая использует только камеру RGB телеуправления. Используя процесс «симуляция в данные» и обучение с подкреплением, метод решает сложную проблему преобразования движений человека в действия, которые может выполнять робот.

Используя комплексный имитатор движений всего тела, похожий на вечный гуманоидный контроллер (PHC), команда предлагает тренировать и плавно переходить к реальному развертыванию с нулевым обучением. Демонстрация обучения и работы робота представлена в видео.

Разработчики утверждают, что исследование знаменует новую эру в технологии дистанционного телеуправления, облегчая интуитивное и динамичное взаимодействие между людьми и человекоподобными роботами.


Читать далее:

Ученые проверили ДНК червей из Чернобыля

Названы 32 города, которым грозят наводнения к 2025 году

Найден дешевый способ извлекать золото из «отходов»

На обложке: кадр из видео @LeCARLab

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Юпитер оказался не таким, как считали ученые: открытие опровергает гипотезу о гиганте
Космос
Физики придумали, как найти новые измерения в пространстве
Наука
Посмотрите на первое фото кометы C/2024 G3 в России: она прилетает раз в 160 000 лет
Космос
Ученые нашли необычные частицы: их поведение невозможно объяснить обычной физикой
Наука
Байден запретит поставки ИИ-чипов в Россию: что ответила NVIDIA
Новости
300 млрд киловатт-часов: Китай строит крупнейшую в мире гидроэлектростанцию
Новости
Парниковые газы предложили хранить в стенах домов для борьбы с изменением климата
Наука
Ученые разгадали тайну, как древние птерозавры поднялись в воздух
Наука
Эксперимент показал, что фотоны света могут вести себя как частицы темной материи
Наука
ИИ создал крупнейшую базу данных фотографий северного сияния
Наука
Молекулы РНК превратили в «фонарики», чтобы отслеживать их работу в клетке
Наука
Европейский зонд показал северный полюс Меркурия в рекордных деталях
Космос
Посмотрите, как изменится внешний вид людей через 30 лет  
Наука
Посмотрите на первые фото Tesla Model Y без камуфляжа  
Новости
«Тостер» для смартфона обновляет зарядку гаджета за секунды
Новости
Гаджет, который научился читать мысли человека, показали на CES 2025
Новости
Эта камера будет снимать на Луне: Nikon представила прототип на CES 2025  
Новости
Ярчайший гамма-всплеск в истории связали с теорией струн и темной материей  
Новости
Наука в фокусе: кто и зачем делает научно-популярные видеоблоги в России
Кейсы
Telegram раскрыл данные о 2000 пользователях в после ареста Дурова
Новости