Одноногого робота-бобра научили плавать с помощью обучения с подкреплением

Исследователи из Чжэцзянского научно-технического университета и Университета Эссекса разработали метод обучения с подкреплением, который можно использовать для управления движениями одноногого робота, похожего на бобра. Результаты разработки опубликованы в Robotics and Autonomous Systems.

Метод обучения, предложенный робототехникам, позволяет роботу автономно научиться выполнять плавательные движения.

«В нашем исследовании мы представили биологический метод управления обучением с подкреплением для моделирования движения подводных роботов, — рассказал Ганг Чен, один из авторов разработки. — Этот метод основан на одной из наших предыдущих работ по изучению движения бобров, опубликованной в журнале Springer Link’s Journal of Intelligent & Robotic Systems».

Принцип действия обучения робота-бобра

Подводные роботы, подобные созданному Ченом и его коллегами, представляют собой нелинейные системы, и их движения включают сложную гидродинамику. Таким образом, точное моделирование их движения может быть очень сложной задачей, требующей значительных вычислительных ресурсов.

В отличие от других моделей управления подводными роботами подход, разработанный Ченом и его коллегами, не требует интеграции сложных моделей движения, основанных на гидродинамике. Это связано с тем, что он основан на упрощении представлений о работе суставов, отвечающих за плавание, у бобров. Это облегчает обучение модели, а также уменьшают неэффективные движения робота во время обучения.

«Объединяя обучение с подкреплением с механизмами, лежащими в основе плавательного поведения бобров, наш метод максимально быстро и эффективно реализует контроль робота над плаванием, — пояснил Чен. — Наиболее заметным преимуществом является то, что он позволяет избежать создания сложных моделей управления движением и быстро реализовать управление плаванием боброподобного одноногого робота».


Читать далее

Американский спутник «разглядел» с Земли необычное послание

Опубликовано видео с ракеты, которую запустили из экспериментального ускорителя

Чудовище в центре нашей Галактики: посмотрите на фото черной дыры в Млечном Пути

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Toyota откроет первый в мире «город роботов» у подножия горы Фудзи
Новости
Найден способ экспоненциально повысить точность квантовых часов
Наука
Найдено крупнейшее облако заряженных частиц: оно в 20 раз больше Млечного Пути
Космос
Роботов научили определять местоположение людей на слух
Новости
Физики установили новый мировой рекорд точности работы кубита
Наука
Ученые восстановили пути миграции неандертальцев из Европы в Сибирь
Наука
В Китае создали ИИ для проектирования чипов: он справился за несколько дней
Новости
Четыре спутника НАСА наблюдали гигантский выброс плазмы на Солнце
Космос
Математики МГУ описали движение веществ в организме человека
Наука
В Стэнфорде создали вращающееся устройство, которое удаляет тромбы
Наука
В космосе впервые обнаружили гигантскую молекулу с 24 атомами углерода
Космос
Из-за отказа от прививок в России растет заболеваемость корью и коклюшем
Наука
Инженеры создали мягкого робота, который управляется лазерными лучами
Новости
В Apple усомнились в способности существующих моделей ИИ рассуждать
Новости
В IBM назвали сроки создания первого масштабного квантового компьютера
Новости
Посмотрите с орбиты Марса на гигантский вулкан, возвышающийся над облаками
Космос
В России приняли закон о создании единого национального мессенджера
Новости
Ученые выяснили, почему у летучих мышей «долгожителей» не бывает рака
Наука
Открыт прием заявок на премию «Промышленная робототехника»
Иннополис
Геофизик записал альбом из «музыки» сейсмических волн месторождения нефти
Новости