Oossa

AIエージェントと評価役を共進化させる「Red Queen Gödel Machine」

AIエージェントと、学習によって性能を高める評価役が並行して進化する新たな枠組み。ベンチマークのコーディング成功率は75%から82%に向上した。

短信著者: Oossa公開日: 1 分で読める

Alex Iacob氏らの研究チームは、Red Queen Gödel Machine(RQGM)をarXivで公開した。このシステムでは、コードの修正案を評価するレビュアーとコーディングエージェントが共進化する。DeepSWEベンチマークでは、RQGMのコーダーが未使用のタスクの82.1%を解決したのに対し、評価器を固定したベースラインの成功率は75.0%だった。より多くの計算資源を投入した場合、RQGMの性能はGPT-6 Astraに迫る。また、この枠組みは科学論文の執筆や証明の採点に関するタスクで、探索コストを3分の1に抑える。

なぜ重要か

人が作成した固定の評価指標に頼らず、使い続けるうちに性能が向上するAIコーディングアシスタントを開発できる可能性がある。

この記事は役に立ちましたか?
共有

次に読む

Oossa · ニュースレター

今週のAIを、わかりやすく

毎週月曜日、知っておきたいニュースをやさしい言葉で。無料・スパムなし。