Un equipo que publicó su trabajo en arXiv presentó GEO Citation Ranker 4B, un modelo pequeño entrenado para predecir qué páginas citarán los motores de respuesta. Pusieron a prueba distintos modelos de puntuación con consultas de GEO-Bench respondidas por diez motores, todos con las mismas fuentes candidatas.
Los investigadores señalan que, en 229 consultas, los resultados del modelo de 4B no se distinguieron estadísticamente de los de modelos más grandes, de 27B, ni de los del modelo alojado Jev. También publicaron el modelo, el benchmark, las predicciones y el código.
Por qué importa
Los equipos que estudian cómo lograr que los motores de respuesta citen páginas pueden probar el modelo y el benchmark publicados, aunque los resultados reportados no demuestran qué tan bien predice citas fuera de este entorno de prueba.
