Нейросеть научила изображение человека на фотографии двигаться

Инженеры из Вашингтонского университета и Facebook создали нейросеть, которая может оживить изображение человека на двухмерной фотографии, заставив его двигаться. Описание работы опубликовано в онлайн-библиотеке arXiv.org.

Сначала алгоритм с помощью нейросети Mask R-CNN создает для изображения человека 3D-модель и отделяет его от фона. Затем на основе исходного изображения искусственный интеллект раскрашивает модель и имитирует ее движения — например, модель выбегает за пределы фотографии.

В демонстрационном ролике исследователи показали, как персонажи на различных фотографиях начинают двигаться и выходят за пределы снимка. Например, алгоритм заставил астронавта из первой пилотируемой на Луну миссии «Аполлон» пройти в скафандре по лунному грунту.

Пока модели движутся довольно неуклюже, однако в ближайшее время инженеры планируют доработать алгоритм.

Ранее нейросеть научилась скрещивать изображения шпица и граната и показывать промежуточные стадии процесса.

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Форум по робототехнике для школьников и студентов пройдет в Иннополисе
Иннополис
В пещере «первых Homo sapience Евразии» обнаружили ритуальную комнату
Наука
Эксперты обсудили путь от замещения импорта к технологическому лидерству
Наука
В ранней Вселенной нашли галактику, напоминающую юный Млечный Путь
Космос
Материал с МКС лучше земных аналогов активирует восстановление костей
Космос
Болото вместо степи: выяснили, каким был мост между Евразией и Америкой
Наука
Горбатый кит в поисках партнера пересек три океана и проплыл 13 000 км
Наука
Химики создали суперустойчивые кишечные палочки для промышленности
Наука
В IBM придумали как в пять раз быстрее обучать ИИ и экономить энергию
Новости
«Т-Технологии» бесплатно предоставит разработчикам российские модели ИИ
Новости
Ростелеком переходит на российский репозиторий исходного кода, разработанный в Университете Иннополис
Иннополис
На коллайдере в ЦЕРНе обнаружили самое тяжелое гиперядро антиматерии
Наука
Европейский зонд показал скрытые детали Меркурия
Космос
Генная терапия с ультразвуковым управлением вылечила рак у мышей
Наука
323 флакона со смертельными вирусами пропали из лаборатории в Австралии
Наука
Инженеры автоматизировали превращение тараканов в киборгов
Новости
Наблюдения «Уэбба» указывают на пробел в Стандартной космологической модели
Космос
Квантовый чип Google превзошел суперкомпьютеры на септиллионы лет
Новости
Дошкольник нашел на пляже топор неандертальца возрастом 50 000 лет
Наука
Создатели ChatGPT научили ИИ генерировать видео по описанию
Новости