Команда Вашингтонского университета нашла способ создания полностью интерактивного трехмерного изображения человека по фотоальбомам и видео таких знаменитостей, как Том Хэнкс, Барак Обама, Хиллари Клинтон и Джордж Буш. Затем эти 3D-модели могут начать говорить чужим голосом, выражать несвойственные им эмоции.
«Представьте себе, что каждый сможет поговорить с тем, кого едва ли встретил бы лично — с Леброном Джеймсом, Бараком Обамой, Чарли Чаплиным», — сказал профессор университета Стив Сейтц.
Для создания таких личин команда ученых задействовала алгоритмы машинного обучения, с целью обнаружить в интернете примерно 200 фото- или видеоматериалов, на которых интересующая персона запечатлена в нужных ракурсах и позах. Затем они разработали способ захвата текстур,зависимых от мимики — мельчайшие выражения лица, которые меняются, когда человек улыбается, или выглядит озадаченным, или расстроенным.
Управляя потоками света, разработчики смогли изобрести новых метод перенесения на карту различий в мимике одной персоны на лицо другой. Таким образом, стало возможно контролировать цифровую модель через видео, на котором записан совершенно другой человек.
Смотрите сами:
Эта технология стала возможна благодаря последним достижениям в трехмерной реконструкции лица, мультитекстурном моделировании и другим 3D-разработкам, совершенным под руководством профессора Вашингтонского университета Иры Кемельмахер-Шильцерман.