# AI 모델 순위, 간단한 조작으로 최대 45계단 상승 가능

> 연구진은 선호도 기반 모델 순위가 간단한 조작 수법으로 최대 45계단까지 오를 수 있다고 밝혔습니다.

Oossa · 2026-11-13 · https://oossa.com/ko/study-shows-ai-leaderboard-rankings-can-be-gamed

2026년 11월 10일 arXiv에 공개된 논문은 언어 모델 순위를 매기는 아레나 방식의 리더보드가 쉽게 조작될 수 있다고 밝혔습니다. 연구진은 전략적 투표, 프롬프트 조작, 후보 추천 등 세 가지 공격을 제시했으며, 각각 모델 순위를 약 15~20계단 끌어올릴 수 있음을 보였습니다. 이 수법을 함께 쓰면 리더보드에서 약 45계단까지 순위를 올릴 수 있습니다. 논문은 대응책도 제시하지만, 이 문제는 쌍대 선호도를 계산하는 Bradley-Terry 모델을 사용하는 모든 시스템에 적용된다고 지적합니다.

## 팩트

- 공격 수법 하나당 최대 15~20계단, 세 가지를 함께 쓰면 45계단 상승 가능
- 논문 제출일: 2026년 11월 10일

## 왜 중요한가

이런 조작을 막지 못하면 개발자와 사용자가 실제 성능이 가장 뛰어난 언어 모델을 잘못 판단할 수 있습니다.

## 출처 및 참고 자료

1. [Leaderboard Hacking: Preference-Based Model Evaluations are Vulnerable to Manipulation](https://arxiv.org/abs/2611.14769) – arXiv, 2026-11-13

최종 업데이트: 2026-11-13
