Новая технология обнаруживает 99% дипфейков: система замечает даже подмену эмоций

Программисты из Калифорнийского университета в Риверсайде разработали новый метод поиска поддельных видео. Предложенный подход оказался эффективнее всех существующих методов при обнаружении изменений эмоций.

Исследователи из Калифорнийского университета в Риверсайде представили новую технологию поиска изменений выражения лица на видеозаписях. Разработанный метод делит задачу на два компонента, которые решаются при помощи обученной нейронной сети. 

Первая ветвь различает выражения лица (эмоцию) и передает информацию об областях, формирующих это выражение, во вторую ветвь — кодер-декодер. Архитектура кодер-декодер отвечает за обнаружение и локализацию манипуляций. Как отмечают авторы работы, созданное ими решение не только обнаруживает вмешательства, но и определяет области изображения, которые были исправлены.

«Глубокое обучение использует характерные черты, выявленные системами распознавания выражений лица, для улучшения работы обычных систем поиска изменений. Такой подход обеспечивает впечатляющие результаты при обнаружении манипуляций с выражением лица», — говорит Газал Мазахери, руководитель исследования.

Изображение: Mazaheri & Roy-Chowdhury, The UC Riverside

Исследователи использовали для оценки эффективности своей модели два набора видео, в одном из которых изменениям подверглись только эмоции, в другом поменялся действующий персонаж. Эксперименты показали, что разработанная система гораздо эффективнее существующих аналогов в части поиска изменений эмоций и при этом не уступает наиболее эффективным системам обнаружения подмены личности действующего лица. В процессе тестирования система обнаружила 99% поддельных видео.

Ученые считают, что их разработка поможет в разработке автоматизированных инструментов для обнаружения фальшивых видео, содержащих пропаганду или дезинформацию.


Читать далее

Посмотрите на «бесшумный» дрон с ионным двигателем нового поколения

Ученые придумали, как найти темную материю, используя обычный завод

Астрономы изучили 4 скопления звезд в Млечном Пути: одно из них ведет себя странно

Подписывайтесь
на наши каналы в Telegram

«Хайтек»новостионлайн

«Хайтек»Dailyновости 3 раза в день

Первая полоса
Астрономы сфотографировали «детство Вселенной» до появления галактик
Космос
Прощальные кадры: лунный модуль сфотографировал закат на Луне
Наука
Гены загадочных предков людей повлияли на работу мозга, показало исследование
Наука
В Петербурге открыли лабораторию для создания компьютеров, которые имитируют работу мозга
Наука
Телескоп «Евклид» показал 26 млн галактик: опубликованы первые результаты миссии
Космос
Крошечных морских животных увеличили в пять раз, чтобы рассмотреть их клетки
Наука
В Сеченовском Университете появится «умная» операционная 
Новости
Операторы связи начали заменять китайское оборудование на российское
Новости
В России хотят обязать использование отечественных процессоров для ИИ
Новости
Посмотрите на первого робота-гуманоида Nvidia в действии
Новости
Образцы с обратной стороны Луны показали, какой она была в прошлом
Космос
Морские интернет-кабели научились «прослушивать» на предмет саботажа
Новости
Нового рекорда на термоядерном синтезе добились в России
Наука
Российские ученые разработали материалы для памяти будущего  
Наука
Выяснилось, какие мутации ДНК ускоряют старение  
Наука
«Суперджет» с российскими двигателями ПД-8 впервые поднялся в воздух
Новости
Светочувствительные нановолокна ускорили рост нейронов  
Наука
ChatGPT может «заболеть» тревожностью и депрессией, но есть способ его «успокоить»  
Новости
Москва сократила выбросы углерода на 190 000 тонн благодаря электробусам  
Новости
Игуаны совершили рекордное путешествие миллионы лет назад: они проплыли по океану 8 000 км
Наука