Um artigo publicado no arXiv em 10 Nov 2026 mostra que é fácil manipular rankings de modelos de linguagem no estilo arena. Os autores demonstram três ataques — votação estratégica, prompts e indicação — que podem elevar um modelo em cerca de 15‑20 posições cada. Combinados, os truques podem fazê-lo subir aproximadamente 45 posições no ranking. O artigo também apresenta medidas de proteção, mas observa que o problema se aplica a qualquer sistema que use o modelo de Bradley‑Terry para comparar preferências em pares.
Por que importa
Sem medidas de proteção, essas manipulações podem induzir desenvolvedores e usuários ao erro sobre qual modelo de linguagem tem, de fato, o melhor desempenho.
