AI 모델 순위, 간단한 조작으로 최대 45계단 상승 가능

2026년 11월 10일 arXiv에 공개된 논문은 언어 모델 순위를 매기는 아레나 방식의 리더보드가 쉽게 조작될 수 있다고 밝혔습니다. 연구진은 전략적 투표, 프롬프트 조작, 후보 추천 등 세 가지 공격을 제시했으며, 각각 모델 순위를 약 15~20계단 끌어올릴 수 있음을 보였습니다. 이 수법을 함께 쓰면 리더보드에서 약 45계단까지 순위를 올릴 수 있습니다. 논문은 대응책도 제시하지만, 이 문제는 쌍대 선호도를 계산하는 Bradley-Terry 모델을 사용하는 모든 시스템에 적용된다고 지적합니다.