arXiv에 논문을 발표한 연구팀이 답변 엔진이 어떤 페이지를 인용할지 예측하도록 학습한 소형 모델 GEO Citation Ranker 4B를 소개했다. 연구팀은 GEO-Bench 질의에 답변하는 10개 엔진을 대상으로 예측 모델을 시험했으며, 각 엔진에는 동일한 후보 출처를 제공했다.
연구진은 229개 질의에서 4B 모델의 결과가 더 큰 27B 모델이나 호스팅 모델 Jev의 결과와 통계적으로 유의미한 차이가 없었다고 밝혔다. 모델과 벤치마크, 예측 결과, 코드도 공개했다.
왜 중요한가
답변 엔진에 페이지를 인용시키는 방법을 연구하는 팀은 공개된 모델과 벤치마크를 활용해 볼 수 있다. 다만 이번 결과만으로는 이 시험 환경 밖에서도 인용을 얼마나 잘 예측하는지 알 수 없다.