Oossa

PairCLIP-SWA улучшила обнаружение дипфейков с одной моделью

Исследование показало, что усреднение контрольных точек обучения детектора повысило результаты на двух наборах изображений. В одном случае выбор модели по валидационным данным оказался обманчивым.

ЗаметкаАвтор: Опубликовано Oossa: 1 мин чтения

Исследователи представили PairCLIP-SWA — детектор дипфейковых изображений на базе одной визуальной модели OpenCLIP. В тесте IEEE SP Cup 2025 он показал точность 97.04% против 94.46% у опубликованного ансамбля из трёх моделей, обученного по тому же протоколу.

Исследователи также обнаружили, что результаты контрольных точек на валидационных данных могут вводить в заблуждение: на тестовом наборе, созданном на основе OpenForensics, контрольная точка, выбранная по валидации, набрала 88.85%, а усреднённая модель — 94.76%. Это результаты экспериментов, описанных в статье, а не свидетельство эффективности на всех видах дипфейков.

Почему это важно

Для команд, выбирающих детектор дипфейков, результаты показывают: выбор единственной контрольной точки с наилучшим результатом на валидации может привести к более слабым показателям на отдельных тестовых изображениях. Эффективность за пределами этих тестов пока неизвестна.

Эта статья была полезной?
Поделиться

Читайте также

Oossa · Рассылка

Неделя ИИ — простыми словами

Каждый понедельник: главное за неделю понятным языком. Бесплатно, без спама.