Une équipe qui a publié ses travaux sur arXiv présente GEO Citation Ranker 4B, un petit modèle entraîné à prédire quelles pages les moteurs de réponse citeront. Les chercheurs ont testé différents systèmes de notation sur des requêtes de GEO-Bench traitées par dix moteurs, auxquels ils ont soumis les mêmes sources candidates.
Selon les chercheurs, les résultats du modèle 4B ne se distinguaient pas statistiquement de ceux de modèles plus grands, de 27B, ni de ceux du modèle hébergé Jev, sur 229 requêtes. Ils ont également publié le modèle, le benchmark, les prédictions et le code.
Pourquoi c'est important
Les équipes qui cherchent à faire citer leurs pages par les moteurs de réponse peuvent tester le modèle et le benchmark publiés. Les résultats rapportés ne permettent toutefois pas d’établir la qualité de ses prédictions en dehors de ce protocole de test.
