Канадский стартап Kindred AI обучает роботов новым навыкам, используя пилотов-людей, которые тренируют машины в виртуальной реальности. Цель проекта – создать новый тип искусственного интеллекта.
Технология Kindred AI позволяет понять, как человек мог бы в будущем работать в синхронизации с машинами, и как возможности человека усиливают эффективность автоматизированных систем. А планы на будущее у компании еще грандиознее — Kindred надеется, что обучение с помощью человека поможет создать фундаментально новый и более мощный тип искусственного интеллекта.
Основателями Kindred выступили несколько бывших сотрудников D-Wave, компании-производителя квантовых компьютеров. Сейчас стартап тестирует промышленные манипуляторы, способные брать и перекладывать неудобные предметы — например, одежду — быстрее и увереннее, чем это происходит обычно. Время от времени роботы обращаются за помощью к команде людей, которые наблюдают за процессом через устройства виртуальной реальности и иногда берут управление на себя. Один пилот может одновременно следить за несколькими машинами.
«Пилот может видеть, слышать и чувствовать все, что видит, слышит и ощущает робот. Когда действует пилот, его действия повторяет робот, — говорит Джорди Роуз, сооснователь Kindred, бывший сооснователь D-Wave. — Это позволяет нам показывать роботам пример. Люди не такие быстрые, как роботы, и не везде могут дотянуться, но люди все еще превосходят их в запутанных и непредвиденных ситуациях».
Система Kindred использует несколько алгоритмов машинного обучения и пытается предсказать, приведет ли один из них к желаемому результату. Если ни один из них не помогает, она обращается к человеку. Более того, благодаря обучению с подкреплением робот перенимает у пилота опыт.
По словам Роуза, система научилась брать небольшие предметы одежды в два раза быстрее, чем рабочий, тогда как автономно работающий робот был бы слишком ненадежным для этой задачи.
Впрочем, управлять роботами могут не только люди. В патенте Kindred говорится, что пилотом могут выступать даже животные, например, обезьяны. Правда, пока это только теория — ни одна обезьяна в компании не работает. Однако, есть робот-кот, который бродит по офису, занимаясь обучением с подкреплением, пишет MIT Technology Review.
Ученые нашли доказательства того, что Вселенная — это голограмма
Кейсы
Исследователи из некоммерческой организации Open-air, занимающейся фундаментальным изучением ИИ, объявили о создании технологии обучения беспилотников стратегии вождения по компьютерной игре Grand Theft Auto V. Платформа Universe позволяет экспериментировать внутри пространства игры и совершенствуя собственное поведение — метод, известный как обучение с подкреплением.