Детектор дипфейков, предназначенный для идентификации уникальных выражений лица и жестов рук, может обнаруживать фальсифицированные видео. Детектор дипфейков с высокой точностью выявляет фейковые видео с участием президента Украины Владимира Зеленского.
«Нам не нужно отличать вас от миллиарда людей — мы просто должны отличать вас от дипфейков, сделанных теми, кто пытается вам подражать», — говорит Хани Фарид из Калифорнийского университета в Беркли.
Фарид работал с Матиашем Богачеком в гимназии Йоханнеса Кеплера в Чешской Республике, чтобы разработать возможности распознавания лиц, голосов, жестов рук и движений верхней части тела. Их исследование основано на предыдущей работе, в которой система была обучена обнаруживать поддельные лица и движения головы мировых лидеров, таких как бывший президент Барак Обама.
Богачек и Фарид обучили компьютерную модель на более чем 8-часовом видео с участием Зеленского, которое ранее было размещено в открытом доступе.
Система обнаружения тщательно изучает множество 10-секундных фрагментов, взятых из одного видео, анализируя до 780 поведенческих признаков. Если он помечает несколько клипов из одного и того же видео как фальшивые, это сигнал для аналитиков – присмотреться к ним повнимательнее.
Детектор дипфейков достиг 100-процентной точности при тестировании трех дипфейковых видео Зеленского, в которых изменялись движения его рта и произносимые слова, по заказу компании Colossyan из Делавэра, которая предлагает пользовательские видео с участием актеров с искусственным интеллектом. Точно так же детектор безупречно справился с настоящим дипфейком, выпущенным в марте 2022 года.
