Российская компания Neurodata Lab создала сервис, позволяющий с помощью технологий компьютерного зрения распознать эмоции и пульс человека по видеоролику и аудиозаписи. Об этом пишет vc.ru.
Компания продает эту технологию крупному бизнесу: банкам, страховым компаниям, телекоммуникационным операторам, ритейлерам и научным лабораториям. Сервис может анализировать эмоции клиентов по их мимике и движениям — сравнивая статистику по разным магазинам платформа может предлагать различные улучшения.
Платформа работает на технологиях компьютерного зрения и искусственного интеллекта. Система оценивает кадры и анализирует метрики по выражению лица, движению глаз, позе, голосу, речи, жестам. После этого Neurodata Lab предлагает свое видение того, что чувствует человек в режиме реального времени.
Оценка пульса происходит также по видеоролику. Для этого нейросеть выделяет из видео лицо и шею человека, после чего алгоритмы анализируют пиксели в выбранной области — их движение и изменение цвета. Эти значения можно связать с насыщенностью крови кислородом и расширением капилляров — по этим данным и вычисляют пульс. Сейчас технология измеряет пульс с погрешностью два удара в минуту.
Подобные технологии также можно использовать для анализа поведения водителей такси, отмечают разработчики.