Для этого исследователь использовал комбинацию своего кода и модель OpenAI GPT-2 — систему для генерации текста. GPT-2, по словам его создателей и исследователей, была настолько мощной и потенциально опасной, что ученые долгое время не хотели публиковать ее полную версию. Позже они выпустили более простую модель, в которой также есть функция генерации изображений.
В видеоролике, объясняющем процесс, Рэйфилд отметил, что он собрал 800 изображений пиксельных персонажей из трех разных игр Pokémon и написал сценарий, который будет создавать новых покемонов на основе старых рисунков. Каждому персонажу присваивается свой цвет, некоторые из них остаются прозрачными.
В результате получилось 100 тыс. строк кода. Он использовал их для переобучения модели GPT-2, который выводит случайное текстовое описание, а затем превращает эти строки в базовое изображение. В результате он получил пиксельные существа, которые довольно близки к изображению покемонов.
«Я бы не сказал, что они похожи на настоящих покемонов, но разве их нельзя менять? Причем они выглядят как живые — у них есть свои действия, тело, это не просто случайные пиксели», — отметил исследователь.
Ранее Microsoft объявила об эксклюзивной лицензии модели генерации текстов OpenAI GPT-3. Она может генерировать очень реалистичный текст, причем ее можно встроить в любое приложение или сервис. Ранее компания вложила 1 млрд долларов в стартап из Сан-Франциско и стала эксклюзивным партнером OpenAI. Теперь Microsoft получит доступ к технологиям и сможет использовать их в своих сервисах.
Читать также
В геноме коронавируса нашли скрытый ген, ответственный за пандемию
Ледник «Судного дня» оказался опаснее, чем думали ученые. Рассказываем главное
Выяснилось, что Вселенная нагревается. Температура выросла в 10 раз за 10 млрд лет