Одноногого робота-бобра научили плавать с помощью обучения с подкреплением

Исследователи из Чжэцзянского научно-технического университета и Университета Эссекса разработали метод обучения с подкреплением, который можно использовать для управления движениями одноногого робота, похожего на бобра. Результаты разработки опубликованы в Robotics and Autonomous Systems.

Метод обучения, предложенный робототехникам, позволяет роботу автономно научиться выполнять плавательные движения.

«В нашем исследовании мы представили биологический метод управления обучением с подкреплением для моделирования движения подводных роботов, — рассказал Ганг Чен, один из авторов разработки. — Этот метод основан на одной из наших предыдущих работ по изучению движения бобров, опубликованной в журнале Springer Link’s Journal of Intelligent & Robotic Systems».

Принцип действия обучения робота-бобра

Подводные роботы, подобные созданному Ченом и его коллегами, представляют собой нелинейные системы, и их движения включают сложную гидродинамику. Таким образом, точное моделирование их движения может быть очень сложной задачей, требующей значительных вычислительных ресурсов.

В отличие от других моделей управления подводными роботами подход, разработанный Ченом и его коллегами, не требует интеграции сложных моделей движения, основанных на гидродинамике. Это связано с тем, что он основан на упрощении представлений о работе суставов, отвечающих за плавание, у бобров. Это облегчает обучение модели, а также уменьшают неэффективные движения робота во время обучения.

«Объединяя обучение с подкреплением с механизмами, лежащими в основе плавательного поведения бобров, наш метод максимально быстро и эффективно реализует контроль робота над плаванием, — пояснил Чен. — Наиболее заметным преимуществом является то, что он позволяет избежать создания сложных моделей управления движением и быстро реализовать управление плаванием боброподобного одноногого робота».


Читать далее

Американский спутник «разглядел» с Земли необычное послание

Опубликовано видео с ракеты, которую запустили из экспериментального ускорителя

Чудовище в центре нашей Галактики: посмотрите на фото черной дыры в Млечном Пути

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Ученые создают датчики, похожие на усики комаров, для обнаружения землетрясений
Наука
ИИ диагностирует диабет, ВИЧ и COVID по одному образцу крови
Наука
Китайские генетики создали «рис для укрепления здоровья сердечной системы»
Наука
Тяжелое генетическое заболевание вылечили до рождения в утробе матери
Наука
Высокоскоростная съемка показала, что происходит с каплей при падении в бассейн
Наука
В России создали ИИ-платформу для ускоренной разработки лекарств
Иннополис
Физики побили рекорд Китая по удержанию плазмы в искусственном Солнце
Наука
Мертвая галактика посылает мощные радиовсплески: ученые не могут это объяснить  
Космос
«Невозможная» пара звезд-вампиров странно ведет себя в космосе
Космос
В iPhone 16e стоят чипы, которые оказались недостаточно хороши для iPhone 16
Новости
Выяснилось, как темная тема на сайтах влияет на гаджеты
Новости
Ученые впервые создали «пластичный» инопланетный лед
Наука
В каких странах больше боятся замены людей на ИИ, показало исследование
Наука
Мини-землетрясения под ледяным щитом Гренландии могут изменить уровень моря
Наука
Посмотрите, как Blue Ghost летит над обратной стороной Луны
Космос
Польский стартап представил робота с искусственными мышцами и костями
Новости
Ископаемые находки меняют представление об эволюции неандертальцев
Наука
Microsoft представила квантовый чип Majorana 1 «из новой формы материи»
Новости
Посмотрите на огненный дождь в небе: фрагменты ракеты SpaceX упали в Европе
Космос
Жители России смогут наблюдать редкое астрономическое явление в феврале
Космос