Исследователи обучили ИИ управлять роботизированной рукой на основе видео с YouTube

Американские ученные разработали систему дистанционного управления движениями, которой достаточно двумерных изображений. Предварительная публикация исследования размещена на arXiv.

Ученые из Университета Карнеги-Меллона создали систему дистанционного управления автоматизированной рукой. Достаточно встать перед камерой и выполнить нужные действия. ИИ на основе двумерного изображения генерирует трехмерную модель движения, формирует алгоритм для роботизированной руки.

Традиционно для обучения и дистанционного управления роботами использовались специальные перчатки, датчики движений или откалиброванные системы, состоящие из нескольких камер. Решение, предложенное в исследовании, не требует сложного оборудования и существенно упрощает процесс дистанционного управления. «Наша система работает с использованием одной камеры. Поскольку калибровка не требуется, пользователь может стоять где угодно и при этом успешно управлять роботом», — говорит Дипак Патхак, один из разработчиков системы.

Руки человека и робота существенно отличаются по форме, размеру и структуре суставов. Траектории движения, которые зафиксированы камерой, должны быть не просто воспроизведены, но и преобразованы в последовательность действий конструкционных элементов робота. Примечательно, что для обучения своей системы исследователи использовали только видеоролики с YouTube.

«Мы понимаем, что классические модели сбора данных требуют существенных затрат, — отмечают ученые. — В то же время в интернете множество видеозаписей движения человеческих рук».

Первоначальные результаты исследования многообещающие: даже неподготовленные пользователи могут дистанционно управлять роботом. «Лично для меня самая важная часть исследования — использование неструктурированных данных из интернета для робототехники, — добавляет Патхак. — Наша система удаленного управления не требует перчаток и маркеров и делает обучение роботов более доступным. Мы надеемся, что она поможет в создании автономных механизмов».


Читать далее

Ученые нашли самых здоровых людей на Земле: все дело в уникальном образе жизни

Физики воссоздали способности Т-1000 из «Терминатора-2» в лаборатории

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Астрономы сфотографировали «детство Вселенной» до появления галактик
Космос
Прощальные кадры: лунный модуль сфотографировал закат на Луне
Наука
Гены загадочных предков людей повлияли на работу мозга, показало исследование
Наука
В Петербурге открыли лабораторию для создания компьютеров, которые имитируют работу мозга
Наука
Телескоп «Евклид» показал 26 млн галактик: опубликованы первые результаты миссии
Космос
Крошечных морских животных увеличили в пять раз, чтобы рассмотреть их клетки
Наука
В Сеченовском Университете появится «умная» операционная 
Новости
Операторы связи начали заменять китайское оборудование на российское
Новости
В России хотят обязать использование отечественных процессоров для ИИ
Новости
Посмотрите на первого робота-гуманоида Nvidia в действии
Новости
Образцы с обратной стороны Луны показали, какой она была в прошлом
Космос
Морские интернет-кабели научились «прослушивать» на предмет саботажа
Новости
Нового рекорда на термоядерном синтезе добились в России
Наука
Российские ученые разработали материалы для памяти будущего  
Наука
Выяснилось, какие мутации ДНК ускоряют старение  
Наука
«Суперджет» с российскими двигателями ПД-8 впервые поднялся в воздух
Новости
Светочувствительные нановолокна ускорили рост нейронов  
Наука
ChatGPT может «заболеть» тревожностью и депрессией, но есть способ его «успокоить»  
Новости
Москва сократила выбросы углерода на 190 000 тонн благодаря электробусам  
Новости
Игуаны совершили рекордное путешествие миллионы лет назад: они проплыли по океану 8 000 км
Наука