研究者らは、ウェブやスマートフォン、家庭向けのエージェントが操作を実行する前に、小型AIモデルの提案をチェックするシステム「Vanguard」を発表した。提案された操作とスクリーンショットを照合し、そのまま採用するか、より大きなモデルに代わりの案を作らせるかを判断する。
研究者らのテストでは、Vanguardが判定した20億パラメーターのモデルの提案は、80億パラメーターのモデルと同等以上の精度を示し、名称が挙げられた2つのベンチマークでは、より高い精度を記録した。大きなモデルが操作案を作成したのは、全体の一部にとどまった。
なぜ重要か
ウェブやスマートフォン向けエージェントを開発するチームにとって、Vanguardは、テストしたタスクで精度を落とさずに大規模モデルの呼び出しを減らせる可能性がある。ただし、実際の製品でも同じ結果が得られるかは、まだ分かっていない。