Prime Intellectはprime-rl 0.10.0とverifiers 0.4.0を発表した。今回の更新では、非同期強化学習のデフォルト損失関数が、従来のDPPOベースのものから新しいIPO(INTELLECT Policy Optimization)損失関数に切り替わった。また、大規模モデルのQwen3-235B-A22Bなどで学習速度を最大1.15倍に高める性能改善に加え、DeepSeek V4 FlashやQwen-VLといった新しいアーキテクチャにも対応した。
なぜ重要か
研究者は大規模言語モデルをより速く学習でき、安定性の高い強化学習損失関数によって学習の崩壊を防ぎやすくなる。