Ученые из немецкого Института Макса Планка и компании Technicolor создали технологию реконструкции поверхности лица по двухмерному видео и превращения плоской картинки в детализированные трехмерные модели.
Киностудии тратят порой недели, чтобы создать реалистичное изображение какого-нибудь фантастического героя, который промелькнет в кадре за 5 секунд. «Многое приходится делать на компьютере руками, — говорит Кристиан Теобальт, профессор информатики Университета Саара и Института Макса Планка.
Вместе со своими коллегами Теобальт хочет значительно ускорить этот процесс. Для того чтобы анимировать лицо со всеми деталями, требуется точная трехмерная модель, на которую накладывается такое же освещение, как в сцене. Затем модели придают нужное выражение лица с помощью математических вычислений.
Новая технология позволяет создавать «болванки» на основе видеоматериала. Она использует математические вычисления, чтобы определить параметры всех деталей — не только геометрии лица, но и характеристики отражения и освещения. «Это значит, мы можем решить, сидя за компьютером, должен ли актер или аватар выглядеть довольными или задумчивым, и можем придать выражению его лица такие детали, каких не было, когда эта сцена снималась», — говорят ученые из Саара.
Разработка немецких специалистов вызывает интерес не только в киноиндустрии, но и может оказаться полезной при создании лиц для виртуальных помощников или аватаров для эффекта телеприсутствия и виртуальной реальности.