Сервис, превращающий набросок в картину, разработали в Университете Иннополис

Студенты Университета Иннополис представили сервис НейроХудожник, который создает картину, граффити или аниме на основе наброска. О разработке «Хайтек» сообщили в пресс-службе вуза.

Студенты Университета Иннополис представили сервис для генерации картин НейроХудожник на XIV Международном экономическом форуме «Россия — Исламский мир: KazanForum». С помощью несколько нейросетей приложение позволяет на основе наброска сгенерировать картину в стиле одного из четырех известных художников.

https://hightech.fm/wp-content/uploads/2023/06/screen-recording-2023-05-31-at-15.42.49.mov
Генерация картин с помощью сервиса НейроХудожник. Видео: Университет Иннополис

НейроХудожник использует модель BLIP-large, чтобы определить, что нарисовал пользователь. На основе собранных данных Stable Diffusion v 1.5 преобразует набросок в картину в одном из четырех узнаваемых художественных стилях: пейзажиста Ивана Шишкина, основоположника супрематизма Казимира Малевича, автора классических аниме Хаяо Миядзаки и уличного художника Бэнкси. 

Обучение нейросетей мы провели на тысяче картинах художников, чтобы уловить особенности и детали работ каждого. Дополнительно установили в приложение блок поверх второй модели, который следит за тем, что нарисовал пользователь, и контролирует пространственную информацию 40 % первых шагов. Благодаря этому итоговая ИИ-картина получается похожей на изначальный набросок.

Яков Сапаров, студент Университета Иннополис, ML-специалист НейроХудожника

В дни проведения форума 438 участников нарисовали свои картины с помощью приложения на стенде Университета Иннополис. А всего НейроХудожником воспользовались больше 6 тыс. человек, которые сгенерировали свыше 30 тыс. рисунков, сообщают разработчики. Чаще всего пользователи выбирали стили Хаяо Миядзаки и Ивана Шишкина.

Посетители стенда удивлялись и детально рассматривали результаты, спрашивали про мобильную версию сервиса, а некоторые даже хотели заказать у нас физическую копию получившейся картины. Возможно, это перспективная идея для нашего следующего стартапа.

Сергей Полин, студент Университета Иннополис, основатель НейроХудожника

Исследователи продолжают работать над совершенствованием сервиса. Они планируют расширить коллекции стилей и направлений, доработать алгоритмы для улучшения качества картин и запустить мобильное приложение. Протестировать работу сервиса и создать собственную картину можно по ссылке.


Читать далее:

Массивные объекты во Вселенной исчезают из-за излучения Хокинга

Очень редкие артефакты нашли в пустыне: им больше 4 300 лет

Назван популярный подсластитель, который повреждает ДНК человека

На обложке: Изображение от kjpargeter на Freepik

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Ученые впервые наблюдали, как орангутанг занимается самолечением
Наука
SpaceX не смогла скрыть полет ракеты над Россией: в сети публикуют фото
Космос
Зонд «Эйнштейн» показал первую партию редких космических фото
Космос
Миссию по доставке образцов с загадочной стороны Луны запустили в Китае
Наука
Ученые подтвердили ключевые события из Библии
Наука
Недалеко от нас есть планета, где ветер дует быстрее пули
Космос
Найден необычный способ бороться с хроническим стрессом
Наука
Посмотрите на самый редкий торнадо, который пронесся над США
Наука
Над Землей пролетел астероид, который вращался быстрее всех остальных
Космос
Ученые показали лицо женщины, которая жила 75 000 лет назад
Наука
Анализ генов показал, как древние водоросли вышли на поверхность планеты
Наука
Древняя технология поможет вырастить растения на Марсе, считают ученые
Космос
Физики из MIT добились рекордной близости между атомами для квантовых исследований
Наука
В Германии на ветряную электростанцию впервые установили деревянные лопасти
Новости
Инженеры разработали искусственную пиявку для безболезненного забора крови у детей
Наука
Solar Orbiter запечатлел «пушистую» корону Солнца в завораживающих деталях
Космос
Китай отправляет миссию на обратную сторону Луны: как смотреть онлайн
Космос
ИИ нашел асимметрию материи и антиматерии на Большом адронном коллайдере
Наука
TikTok вернулся в Россию? Что известно прямо сейчас
Новости
В Японии разработали устройство 6G, которое передает данные со скоростью 100 Гбит/с
Новости