Для создания мема с кэпшном нейросеть использует специальную картинку шаблон и окно для ввода текста. Инженеры научили нейросеть не просто придумывать абсурдную фразу, но и делать подпись именно определенного формата. Например, в меме с Боромиром фраза должна начинаться на «Нельзя так просто взять и…».
Нейросеть обучалась на 400 тыс. картинках с мемами. В итоге искусственный интеллект выделил 2,6 тыс шаблонных мемов, у каждого из которых было свое шаблонное описание.
Добровольцы, которые оценивали работу искусственного интеллекта, не смогли отличить выдуманные мемы от настоящих. При этом в дальнейшем ученые планируют расширить выборку респондентов, которые примут участие в эксперименте.
Ученые уже выложили исходный код алгоритма на github, там опубликованы и примеры использованных мемов.