Ein Team hat auf arXiv den GEO Citation Ranker 4B vorgestellt, ein kleines Modell, das vorhersagen soll, welche Seiten Antwortmaschinen zitieren. Die Forschenden testeten die Bewertungsmodelle mit Anfragen aus dem GEO-Bench, die von zehn Maschinen beantwortet wurden. Jede erhielt dieselben Quellen zur Auswahl.
Laut den Forschenden unterschieden sich die Ergebnisse des 4B-Modells bei 229 Anfragen statistisch nicht von denen größerer 27B-Modelle oder des gehosteten Modells Jev. Außerdem veröffentlichten sie das Modell, den Benchmark, die Vorhersagen und den Code.
Warum es wichtig ist
Teams, die untersuchen, wie sie erreichen können, dass Antwortmaschinen ihre Seiten zitieren, können ein veröffentlichtes Modell und einen Benchmark ausprobieren. Die berichteten Ergebnisse belegen jedoch nicht, wie gut das Modell Zitate außerhalb dieses Testaufbaus vorhersagt.