Нейронная сеть пишет названия блюд китайской каллиграфией и абстрактными картинами

Исследователи из Университета Тунцзи в Шанхае в Китае и Университета Делавэра в США создали модель на основе GAN, которая может создавать абстрактные произведения искусства, вдохновленные китайской каллиграфией. Китайская каллиграфия относится к художественной форме, в которой традиционно писались китайские иероглифы.

За последние несколько лет компьютерные ученые разрабатывают все более совершенные и изощренные инструменты искусственного интеллекта, которые могут решать широкий спектр задач. Например, генеративные состязательные сети (GAN), модели машинного обучения, которые учатся генерировать новые данные, включая текст, аудиофайлы или изображения. Некоторые из этих моделей также могут быть адаптированы для творческих целей, например, для создания уникальных рисунков, песен или стихов.

В 2019 году мы сотрудничали с рестораном в Шанхае, чтобы продемонстрировать некоторые технологии искусственного интеллекта для улучшения взаимодействия с клиентами и повышения качества обслуживания. Затем у нас возникла идея использовать технологии искусственного интеллекта для создания персонализированного абстрактного искусства на основе блюд, которые заказывают клиенты, и представить произведения искусства, чтобы развлекать клиентов, пока они ждут, когда их подадут.

Профессор Гарри Цзяннан Ван, один из авторов, проводивших исследование

Первоначальной целью недавней работы Ванга и его коллег было связать названия китайских блюд с искусством. Для этого они решили использовать китайскую каллиграфию, поскольку это бесценная часть культурного наследия Китая, способная выражать сложные значения эстетическим и художественным способом. Кроме того, они черпали вдохновение в некоторых картинах абстрактных экспрессионистов, таких как американский художник Франц Клайн, выполненных в 1940-х и 1950-х годах.

Пример работы нейронной сети

Сначала исследователи составили набор данных по китайской каллиграфии, где у каждого символа есть много разных каллиграфических изображений. Впоследствии они обучили условную модель GAN на основе набора данных для создания новых изображений китайской каллиграфии, которые выглядят как символы в обучающем наборе, но никогда ранее не встречались.

Эта модель, созданная исследователями, вычисляет сходство между символами, которыми пишут название китайского блюда, и символами в новом наборе каллиграфических данных, который они скомпилировали, и определяет наиболее похожие из них. Впоследствии модель создает совершенно нового персонажа на основе этих похожих персонажей.

В нашем недавнем исследовании мы смогли использовать китайскую каллиграфию в качестве специального средства для соединения слов и изображений, а затем использовали технологии NLP и GAN для создания абстрактного искусства, вдохновленного китайской каллиграфией. Теперь мы планируем точную настройку нашей модели, чтобы лучше контролировать полученные результаты.

Профессор Гарри Цзяннан Ван, один из авторов, проводивших исследование

Модель также применяет ряд эстетических преобразований — перенос стиля на основе известных картин таких художников, как Пикассо, Ротко, Руссо и Хокни, или преобразование масляной живописи и корректировка соотношения белого пространства.

Когда исследователи протестировали свой фреймворк на основе GAN, они обнаружили, что он может надежно создавать уникальное и эстетически приятное искусство китайской каллиграфии, вдохновленное блюдами, а также другими словами на китайском языке, а также вводить стилистические элементы художников-экспрессионистов.

Читайте также

Минздрав Аргентины раскрыл данные о побочных эффектах у получивших «Спутник V».

Утконос оказался генетической смесью млекопитающих, птиц и рептилий.

Стало известно, почему сперматозоиды двигаются по прямой.

Аборты и наука: что будет с детьми, которых родят.

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Астрономы сфотографировали «детство Вселенной» до появления галактик
Космос
Прощальные кадры: лунный модуль сфотографировал закат на Луне
Наука
Гены загадочных предков людей повлияли на работу мозга, показало исследование
Наука
В Петербурге открыли лабораторию для создания компьютеров, которые имитируют работу мозга
Наука
Телескоп «Евклид» показал 26 млн галактик: опубликованы первые результаты миссии
Космос
Крошечных морских животных увеличили в пять раз, чтобы рассмотреть их клетки
Наука
В Сеченовском Университете появится «умная» операционная 
Новости
Операторы связи начали заменять китайское оборудование на российское
Новости
В России хотят обязать использование отечественных процессоров для ИИ
Новости
Посмотрите на первого робота-гуманоида Nvidia в действии
Новости
Образцы с обратной стороны Луны показали, какой она была в прошлом
Космос
Морские интернет-кабели научились «прослушивать» на предмет саботажа
Новости
Нового рекорда на термоядерном синтезе добились в России
Наука
Российские ученые разработали материалы для памяти будущего  
Наука
Выяснилось, какие мутации ДНК ускоряют старение  
Наука
«Суперджет» с российскими двигателями ПД-8 впервые поднялся в воздух
Новости
Светочувствительные нановолокна ускорили рост нейронов  
Наука
ChatGPT может «заболеть» тревожностью и депрессией, но есть способ его «успокоить»  
Новости
Москва сократила выбросы углерода на 190 000 тонн благодаря электробусам  
Новости
Игуаны совершили рекордное путешествие миллионы лет назад: они проплыли по океану 8 000 км
Наука