Посмотрите, как работает «универсальный робот» Eva с «мозгом» от Open AI

Компания 1X — производитель гуманоидных роботов, получивший финансирование на сумму $25 млн от OpenAI — показала автономную работу гуманоидных роботов Eva, которыми управляет нейросеть от создателей ChatGPT.

Каждое действие роботов контролируется одной нейронной сетью, основанной на компьютерном зрении. Система анализирует видео и с частотой 10 Гц генерирует действия для управления движением, руками, захватом, туловищем и головой. Видео не содержит компьютерной графики и воспроизводится с естественной скоростью, пишут разработчики.

Гуманоиды 1X внешне уступают моделям Tesla или Boston Dynamics: у них нет ног, они перемещаются на колесах и используют простой захват. Но эти детали не так уж важны для текущих задач, считаю разработчики. Для применения на производстве робот должен перемещаться по плоском полу склада, переносить вещи с места на места и управлять ими. А для этого не важно, насколько точно конечности имитируют человеческие.

Ключевая проблема, над которой работают в 1X, заставить машины быстро обучаться новым задачам, а затем выполнять их автономно. Для этого компания обучила 30 роботов Eve ряду индивидуальных задач, используя имитационное обучение с помощью видео и телеуправления. После этого инженеры использовали эти модели поведения для обучения «универсального робота», способного выполнять широкий спектр действий.

Готовая модель была доработана с учетом возможностей конкретной среды — например, складских задач или общих манипуляций с дверями. На практике финальная стадия, по-видимому, будет проводиться непосредственно на производстве покупателя. Телеоператор на первом этапе поможет роботу освоиться в новой среде, а модель глубокого обучения объединит нужные заказчику задачи с навыками робота.

За последний год мы создали механизм обработки данных для решения универсальных задач мобильного манипулирования полностью комплексным способом. Мы убедились, что это работает, поэтому теперь мы нанимаем исследователей ИИ в Сан-Франциско, чтобы увеличить в 10 раз количество роботов и телеоператоров.

Эрик Джанг, вице-президент 1X по искусственному интеллекту

Читать далее:

На Солнце растет пятно, которое видно с Земли невооруженным глазом

Посмотрите на «обручальное кольцо Эйнштейна» из ранней Вселенной

Редкая окаменелость сохранила ни на что не похожее дерево

_{Изображение на обложке: 1X}