Одноногого робота-бобра научили плавать с помощью обучения с подкреплением

Исследователи из Чжэцзянского научно-технического университета и Университета Эссекса разработали метод обучения с подкреплением, который можно использовать для управления движениями одноногого робота, похожего на бобра. Результаты разработки опубликованы в Robotics and Autonomous Systems.

Метод обучения, предложенный робототехникам, позволяет роботу автономно научиться выполнять плавательные движения.

«В нашем исследовании мы представили биологический метод управления обучением с подкреплением для моделирования движения подводных роботов, — рассказал Ганг Чен, один из авторов разработки. — Этот метод основан на одной из наших предыдущих работ по изучению движения бобров, опубликованной в журнале Springer Link’s Journal of Intelligent & Robotic Systems».

Принцип действия обучения робота-бобра

Подводные роботы, подобные созданному Ченом и его коллегами, представляют собой нелинейные системы, и их движения включают сложную гидродинамику. Таким образом, точное моделирование их движения может быть очень сложной задачей, требующей значительных вычислительных ресурсов.

В отличие от других моделей управления подводными роботами подход, разработанный Ченом и его коллегами, не требует интеграции сложных моделей движения, основанных на гидродинамике. Это связано с тем, что он основан на упрощении представлений о работе суставов, отвечающих за плавание, у бобров. Это облегчает обучение модели, а также уменьшают неэффективные движения робота во время обучения.

«Объединяя обучение с подкреплением с механизмами, лежащими в основе плавательного поведения бобров, наш метод максимально быстро и эффективно реализует контроль робота над плаванием, — пояснил Чен. — Наиболее заметным преимуществом является то, что он позволяет избежать создания сложных моделей управления движением и быстро реализовать управление плаванием боброподобного одноногого робота».


Читать далее

Американский спутник «разглядел» с Земли необычное послание

Опубликовано видео с ракеты, которую запустили из экспериментального ускорителя

Чудовище в центре нашей Галактики: посмотрите на фото черной дыры в Млечном Пути

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Тайны древней звезды по соседству изучили, «подслушав ее песню»
Космос
Baidu делает ИИ для перевода звуков животных в человеческую речь
Наука
Оказалось, ИИ врет чаще при одном условии: как этого избежать
Новости
Суперкомпьютер Маска сжирает электричество как 300 000 домов: люди протестуют
Новости
Посмотрите, как робот стремительно отбивает подачи в настольном теннисе
Новости
Физики исполнили мечту алхимиков: свинец в коллайдере превратили в золото
Наука
Создано музыкальное приложение для реабилитации после инсульта
Наука
«Эффект аккордеона» превращает жесткий графен в эластичный материал
Наука
ИИ восстановил имя автора свитка, который пережил последний день Помпеи
Наука
Частный лунный модуль вышел на орбиту спутника после двух месяцев полета
Космос
Предок тираннозавра «иммигрировал» в Америку из Азии, считают ученые
Наука
Обновленный Gemini 2.5 Pro от Google возглавил рейтинг ИИ для разработчиков
Новости
Ученые решили проблему, которая мешала запуску термоядерных реакторов почти 70 лет
Наука
Китайское «супероружие» для подводных диверсий оказалось не таким, как считалось
Новости
Отключение мобильного интернета в Москве: какие последствия для бизнеса
Новости
Киберполиция назвала новые схемы мошенников: как они воруют аккаунты на «Госуслугах»
Новости
Хокинг предсказал гибель Земли: оказалось, НАСА сочло угрозу реальной
Наука
Создатель Ethereum признал свои ошибки и решил изменить криптовалюту
Новости
«Ред ОС 8» заработала на Arm-платформах — теперь и на «Байкале»
Новости
Компания Цукерберга использовала уязвимость подростков для рекламы
Новости