AWSは、Amazon SageMaker AIで複数ターンの強化学習を用いて検索エージェントをファインチューニングする方法を解説したガイドを公開した。この手法では、一連の検索を通してエージェントを訓練し、最終的な検索結果の質を報酬として用いる。
AWSの評価では、ファインチューニングしたQwen3.6-27Bは未学習のベンチマーク4種のうち3種で性能が向上した。BrowseComp-Plusでは、nDCG@10のスコアが23.7%上昇し、失敗率は22.89%から0.68%に低下した。AWSによると、訓練は1エポック、バッチサイズ128で実施した。提供された文章には、結果の全容は記載されていない。
なぜ重要か
SageMaker AI上で検索エージェントを開発するチームにとって、AWSの結果は、複数ターンのファインチューニングによってタスクの失敗を減らせる可能性を示している。ただし、提供された記事の抜粋には、ベンチマークの全結果や訓練コストは含まれていない。