Одноногого робота-бобра научили плавать с помощью обучения с подкреплением

Исследователи из Чжэцзянского научно-технического университета и Университета Эссекса разработали метод обучения с подкреплением, который можно использовать для управления движениями одноногого робота, похожего на бобра. Результаты разработки опубликованы в Robotics and Autonomous Systems.

Метод обучения, предложенный робототехникам, позволяет роботу автономно научиться выполнять плавательные движения.

«В нашем исследовании мы представили биологический метод управления обучением с подкреплением для моделирования движения подводных роботов, — рассказал Ганг Чен, один из авторов разработки. — Этот метод основан на одной из наших предыдущих работ по изучению движения бобров, опубликованной в журнале Springer Link’s Journal of Intelligent & Robotic Systems».

Принцип действия обучения робота-бобра

Подводные роботы, подобные созданному Ченом и его коллегами, представляют собой нелинейные системы, и их движения включают сложную гидродинамику. Таким образом, точное моделирование их движения может быть очень сложной задачей, требующей значительных вычислительных ресурсов.

В отличие от других моделей управления подводными роботами подход, разработанный Ченом и его коллегами, не требует интеграции сложных моделей движения, основанных на гидродинамике. Это связано с тем, что он основан на упрощении представлений о работе суставов, отвечающих за плавание, у бобров. Это облегчает обучение модели, а также уменьшают неэффективные движения робота во время обучения.

«Объединяя обучение с подкреплением с механизмами, лежащими в основе плавательного поведения бобров, наш метод максимально быстро и эффективно реализует контроль робота над плаванием, — пояснил Чен. — Наиболее заметным преимуществом является то, что он позволяет избежать создания сложных моделей управления движением и быстро реализовать управление плаванием боброподобного одноногого робота».


Читать далее

Американский спутник «разглядел» с Земли необычное послание

Опубликовано видео с ракеты, которую запустили из экспериментального ускорителя

Чудовище в центре нашей Галактики: посмотрите на фото черной дыры в Млечном Пути

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Телескоп запечатлел столкновение галактик на скорости 3,2 млн км/ч
Космос
Укус вместо укола: создана вакцина от малярии, распространяемая комарами
Наука
Физики определили форму отдельного фотона
Наука
Создатели ChatGPT планируют выпустить собственный браузер
Новости
Плотность промышленных роботов в мире удвоилась за семь лет
Новости
В Гибралтаре нашли «фабрику», на которой неандертальцы варили клей
Наука
Nvidia раскрыла, какие товары компании будут в дефиците и когда
Новости
Посмотрите на первое в истории фото звезды из другой галактики
Космос
Чрезвычайно молодую планету нашли у звезды с «кривым» диском
Космос
Предложен способ навигации дронов без GPS: по «отпечаткам рельефа»
Новости
Ученые раскрыли тайну гигантских черных дыр ранней Вселенной
Космос
Microsoft и Atom Computing выпустят коммерческий квантовый компьютер в 2025 году
Новости
Создан робот-голубь, который летает как настоящая птица
Наука
На страницах тысячелетнего Голубого Корана нашли скрытый текст
Наука
Уязвимость ИИ: типы атак LLM-injection и способы защиты от них
Технологии
Intel случайно упомянула о планах по разработке ИИ-ускорителя
Новости
S.T.A.L.K.E.R. 2: Heart of Chornobyl вышел спустя 15 лет: цены, патчи, бесплатный контент и концовка
Новости
Посмотрите, как прототип космоплана Aurora разогнали до 1,1 Маха 
Новости
Российских айтишников обяжут преподавать в вузах: кого это коснется
Новости
Киберспорт в России сегодня: плюсы и минусы разных бизнес-моделей
Мнения