Создан ИИ, отслеживающий эмоции зрителей в кинотеатрах

Исследовательский отдел Disney использовал машинное обучение для оценки реакции аудитории на фильмы на основе выражения лиц зрителей. Алгоритм использует так называемые факторизованные вариационные автокодеры или FVAEs, чтобы предсказать, как зритель будет реагировать на остальную часть фильма после отслеживания выражения лиц в течение нескольких минут.

В зале кинотеатра установлены умные, подключенные к сети камеры. Они сканируют эмоции зрителей в определенные моменты фильма. ИИ, основанный на FVAE, запрограммирован распознавать эмоции по выражению лица. Получив информацию с камер, алгоритм сравнивает ее с базой эмоций, на которые рассчитывали создатели киноленты. Это чем-то напоминает то, как Amazon и Netflix предлагают пользователям новые товары, основываясь на истории ваших покупок.

Исследователи поместили четыре инфракрасные камеры над экраном в кинотеатре и смогли зафиксировать 16 млн разных выражений лиц от более чем 3100 зрителей в течение 150 показов девяти фильмов Disney, включая «Звездные войны: Пробуждение силы», «Зверополис» и «Книга джунглей». Стоит отметить, что Disney пока не превратился в «Большого брата», сканирование проходило в одном кинотеатре на 400 мест где-то в США с оповещением зрителей об эксперименте.

Новая технология поможет киностудиям глубже работать с тестовыми аудиториями, которым они показывают фильмы на ранней стадии производства. Как правило, киностудии просят зрителей, участвующих в предпоказе, составить письменный отчет и ответь на ряд вопросов. По словам исследователей Disney, таким образом теряются многие детали, так как от человека требуется сознательное размышление и записывание впечатлений в процессе показа. Некоторые студии вешают на зрителей пульсометры для отслеживания эмоций (так делает, например, 20th Century Fox), но в Disney считают, что оценка эмоций силами искусственного интеллекта более точна, так как зрители могут полностью расслабиться и вести себя естественно.

Исследовательская группа считает, что разработка может пригодиться и в других сферах. В частности, компьютер может отслеживать движения ветвей деревьев на ветру, волн или, к примеру, полет птиц для создания максимально реалистичной анимации.

У звезд YouTube появился новый инструмент анализа эффективности их видеороликов: искусственный интеллект, разработанный стартапом YouFirst из Словакии, позволяет распознать эмоциональную реакцию зрителей на контент.