GPT2 обучалась на массиве данных объемом 40 ГБ — в нейросеть загрузили 10 млн англоязычных статей и новостей. Система способна писать тексты на заданную тему и распознает стилистику текста по одному абзацу, отмечают разработчики.
Кроме того, ИИ избавили от традиционной ошибки текстовых генераторов — существующие нейросети часто теряют фокус. Например, к концу абзаца алгоритм часто забывает, с чего он начинался.
OpenAI, вопреки обыкновению, не стала публиковать исходный код нейросетей. Разработчики опасаются, что злоумышленники могут использовать его в противоправных целях.
Ранее искусственный интеллект OpenAI Five победил со счетом 2:0 команду профессиональных комментаторов Dota 2.