Oossa

Claude Fable 5.2、Devinで公開 ベンチマーク成績向上

新モデルはFrontierCode 2.0で49.1%を記録。タスクあたりのコストも3分の1未満に抑えた。

著者: Oossa公開日: 2 分で読める

Arnold Francisca · Unsplash

Anthropicは2026年11月9日、Claude Fable 5.2を公開し、Devinプラットフォームで利用できるようにした。Devinにはデスクトップアプリとコマンドラインインターフェースがあり、開発者はすぐにモデルを使い始められる。今回のアップグレードでは、多くのチームが実際のソフトウェア開発の課題で試していた旧バージョンの5.1が置き換わる。 同社によると、このモデルは一般的なソフトウェア開発タスクを再現するベンチマーク「FrontierCode 2.0」で評価された。このベンチマークでは、解決策の品質、コードベースに取り込みやすいかどうか、基本的な安全性チェックに合格するかを採点する。Fable 5.2の加重スコアは49.1%で、前モデルの32.4%を上回ったほか、競合モデルのOpus 5.5の45.5%も超えた。 Anthropicは、注目すべきスコアだけでなく、Fable 5.2はタスクあたりの平均コストを3分の1未満に抑えながら、旧モデルの最高成績に到達すると説明している。コストは、公開されている割引を適用した後のAPI標準価格に基づいて算出される。つまり、チームはAPI利用料を抑えつつ、より質の高いコード提案を得られる。 Devin Desktopクライアントをダウンロードするか、Devin CLIをインストールすれば、すぐに利用できる。特別なライセンスについての案内はなく、通常のDevin料金プランを通じてモデルにアクセスする。

ベンチマークの仕組み

FrontierCode 2.0では、モデルにコードの作成または変更を指示し、その出力を一連のルールに照らして評価する。安全でないコードを生成するなど、回答が失格条件に該当した場合、その試行のスコアは0点となる。条件を満たした試行では、可読性、正確性、既存のコードベースへの取り込みやすさを基準に解決策を採点する。最終スコアは、これらの項目の加重平均だ。 Anthropicによると、コストの数値には、割引適用後の公開標準価格に基づく、1回の実行あたりの平均支出額(USD)が含まれる。Fable 5.2はより少ない費用で同等以上のスコアを達成できるため、開発者は同じ予算でより多くの試行を重ねられる。

なぜ重要か

ソフトウェア開発チームにとって、このアップグレードはAPIコストを比例して増やすことなく、より速く質の高いコード提案を得られることを意味する。小規模企業はAIを活用したコーディングをより多く試せる一方、大規模なチームはクラウド支出を抑えられる可能性がある。ベンチマーク結果について、独立した検証はまだ公表されていない。

この記事は役に立ちましたか?
共有

次に読む

Oossa · ニュースレター

今週のAIを、わかりやすく

毎週月曜日、知っておきたいニュースをやさしい言葉で。無料・スパムなし。