Одноногого робота-бобра научили плавать с помощью обучения с подкреплением

Исследователи из Чжэцзянского научно-технического университета и Университета Эссекса разработали метод обучения с подкреплением, который можно использовать для управления движениями одноногого робота, похожего на бобра. Результаты разработки опубликованы в Robotics and Autonomous Systems.

Метод обучения, предложенный робототехникам, позволяет роботу автономно научиться выполнять плавательные движения.

«В нашем исследовании мы представили биологический метод управления обучением с подкреплением для моделирования движения подводных роботов, — рассказал Ганг Чен, один из авторов разработки. — Этот метод основан на одной из наших предыдущих работ по изучению движения бобров, опубликованной в журнале Springer Link’s Journal of Intelligent & Robotic Systems».

Принцип действия обучения робота-бобра

Подводные роботы, подобные созданному Ченом и его коллегами, представляют собой нелинейные системы, и их движения включают сложную гидродинамику. Таким образом, точное моделирование их движения может быть очень сложной задачей, требующей значительных вычислительных ресурсов.

В отличие от других моделей управления подводными роботами подход, разработанный Ченом и его коллегами, не требует интеграции сложных моделей движения, основанных на гидродинамике. Это связано с тем, что он основан на упрощении представлений о работе суставов, отвечающих за плавание, у бобров. Это облегчает обучение модели, а также уменьшают неэффективные движения робота во время обучения.

«Объединяя обучение с подкреплением с механизмами, лежащими в основе плавательного поведения бобров, наш метод максимально быстро и эффективно реализует контроль робота над плаванием, — пояснил Чен. — Наиболее заметным преимуществом является то, что он позволяет избежать создания сложных моделей управления движением и быстро реализовать управление плаванием боброподобного одноногого робота».


Читать далее

Американский спутник «разглядел» с Земли необычное послание

Опубликовано видео с ракеты, которую запустили из экспериментального ускорителя

Чудовище в центре нашей Галактики: посмотрите на фото черной дыры в Млечном Пути

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Nvidia показала архитектуру Blackwell для видеокарт GeForce RTX 50-й серии
Новости
В Китае нашли череп 10-метрового динозавра юрского периода
Наука
Инженеры MIT добились рекордной точности работы кубита: 99,998%
Новости
В 21 регионе России «замедлился интернет»: Роскомнадзор объяснил причину
Новости
Ядерные отходы хотят переработать в материалы для электроники
Новости
«Уэбб» рассмотрел кольца из углерода в двойной звездной системе
Новости
Квантовые инженеры поместили кота Шредингера в компьютерный чип
Наука
Кофе может снизить риск смертности, но только в одном случае
Наука
Этот ядерный двигатель поможет быстрее долететь до Марса: как он работает
Космос
Запуск Falcon 9 завершился успехом: что было на борту миссии
Космос
Прототип Boom Supersonic XB-1 приблизился к звуковому барьеру
Новости
Ученые заглянули внутрь нейтронных звезд, используя квантовую физику
Космос
Квантовые симуляторы: объяснение от ученого
Мнения
Источник в СМИ назвал возможную причину сбоя рунета
Новости
Мошенники начали выдавать себя за начальников в рабочих чатах: как это работает
Новости
Холодные атомы этого металла могут создавать новые состояния материи
Наука
Древние артефакты в Украине раскрыли тайны навигации викингов
Наука
Послушайте, как звучат вспышки на Солнце: данные собрал Solar Orbiter  
Космос
Тяжелый беспилотник на водородных топливных ячейках впервые испытали в Китае
Новости
Ученые создали катализатор, который нарушает законы физики
Наука