Google a annoncé Gemini 4 Carbon le 28 octobre, le présentant comme son modèle le plus performant en cybersécurité et pour les tâches de longue durée. L’accès est d’abord réservé à un groupe sélectionné de défenseurs cyber dans le cadre du programme Fairwind de Google. Les développeurs, les entreprises et le grand public n’y ont pas encore accès de façon générale. Google prévoit d’élargir l’accès après avoir recueilli des commentaires et renforcé les mesures de protection.
Selon Google, le modèle arrive aussi en tête de l’Intelligence Index V5 d’Artificial Analysis. Tom’s Hardware rapporte que Carbon a obtenu un score de 59, soit un point de plus que Claude Opus 5.5, et s’est classé premier dans quatre des neuf évaluations de l’indice. Il a également obtenu le meilleur résultat au test AA-Omniscience v1.1 d’Artificial Analysis, qui mesure les hallucinations et la capacité à restituer des informations connues. Il s’agit d’un classement dans un test de référence, et non d’une garantie que Carbon ne commettra pas d’erreurs dans un usage quotidien.
Que révèlent les tests de sécurité ?
Google indique que le modèle a obtenu 88,2 % à SEC-bench Pro, qui évalue la détection de vulnérabilités logicielles ; 54,8 % à ExploitGym, qui teste si des failles peuvent être exploitées ; et 71,0 % à CWE-bench, qui mesure la correction de vulnérabilités. Google précise que ces tests ont été réalisés sans ses garde-fous et qualifie les résultats de pointe. L’entreprise affirme également que, lors de tests internes, Carbon s’est montré plus de deux fois plus performant que Gemini 4 Argon pour générer du code sécurisé. L’équipe Chrome de Google indique que Carbon a fait plus de 10 fois mieux qu’un autre modèle de pointe de l’entreprise pour produire des correctifs de grande qualité, sans toutefois nommer ce modèle ni fournir davantage de détails sur les tests dans l’annonce.
Google affirme que Carbon a gagné 89 points sur WebDev Arena, atteignant la quatrième place avec un score de 1 768. L’entreprise présente aussi le modèle comme étant conçu pour des tâches complexes en plusieurs étapes, susceptibles de se poursuivre pendant des jours. Ces résultats et capacités sont rapportés par l’entreprise ; l’annonce ne permet pas d’établir comment le modèle se comportera pour l’ensemble des utilisateurs et de leurs tâches de programmation ou de sécurité.
Quand sera-t-il accessible à davantage d’utilisateurs ?
Google indique que Carbon sera progressivement proposé à d’autres partenaires de confiance, puis mis à la disposition des développeurs, des entreprises et du grand public dans ses produits « dès que possible ». Aucune date n’a été annoncée pour ce lancement plus large. Ars Technica relève que Carbon arrive environ deux semaines après Gemini 4 Argon, tandis que Google le présente comme une évolution d’Argon.
Google indique que le tarif de lancement sera le même que celui d’Argon : $2 par million de jetons d’entrée et $10 par million de jetons de sortie. Les jetons d’entrée mis en cache coûteront 95 % de moins que le tarif standard des jetons d’entrée. Ces prix sont utiles aux développeurs qui préparent un usage futur, mais ne signifient pas que le modèle leur est accessible dès maintenant.
Pourquoi c'est important
Les défenseurs cyber du groupe initial de Google dans le cadre de Fairwind sont les premiers à pouvoir essayer Carbon ; les développeurs et les utilisateurs ordinaires ne disposent toujours pas de date d’accès général. Google a annoncé les tarifs d’un lancement ultérieur, mais il reste à vérifier si les progrès observés dans les tests de référence se traduiront par de meilleurs résultats pour les tâches d’un utilisateur donné.
