Oossa

Fireworks AI、Kimi K3の強化学習を最大2.6倍高速化

Fireworks AIによると、2.8兆パラメーターのKimi K3モデルは学習速度が最大2.6倍になり、法律分野のタスクでもスコアが向上した。

短信著者: Oossa公開日: 1 分で読める

Fireworks AIは、2.8兆パラメーター、コンテキストウィンドウが100万トークンのモデル「Kimi K3」の強化学習を高速化する手法について、技術レポートを公開した。同社は、新たなカーネルと通信手法により、順伝播と逆伝播を1.3~2.6倍高速化できるとしている。同じ構成を使ったKimiベースの法律分野向けモデル「Harvey Tenet」は、LAB Contractsベンチマークで全項目合格率19.7%を記録し、従来の最高スコアだったFable 5の11.5%を上回った。

なぜ重要か

高速化により、開発者は特化型AIの方針をより速く試行・改善できる。また、法律分野のベンチマークスコア向上は、複雑な契約分析への対応力が高まったことを示している。

出典と参考資料

1 件の出典
  1. Fireworks AI原典を読む

Markdown

この記事は役に立ちましたか?
共有

次に読む

Oossa · ニュースレター

今週のAIを、わかりやすく

毎週月曜日、知っておきたいニュースをやさしい言葉で。無料・スパムなし。