Исследователи представили PairCLIP-SWA — детектор дипфейковых изображений на базе одной визуальной модели OpenCLIP. В тесте IEEE SP Cup 2025 он показал точность 97.04% против 94.46% у опубликованного ансамбля из трёх моделей, обученного по тому же протоколу.
Исследователи также обнаружили, что результаты контрольных точек на валидационных данных могут вводить в заблуждение: на тестовом наборе, созданном на основе OpenForensics, контрольная точка, выбранная по валидации, набрала 88.85%, а усреднённая модель — 94.76%. Это результаты экспериментов, описанных в статье, а не свидетельство эффективности на всех видах дипфейков.
Почему это важно
Для команд, выбирающих детектор дипфейков, результаты показывают: выбор единственной контрольной точки с наилучшим результатом на валидации может привести к более слабым показателям на отдельных тестовых изображениях. Эффективность за пределами этих тестов пока неизвестна.