Oossa

Google houdt Gemini 4 Carbon voorlopig achter voor cyberverdedigers

Volgens Google scoort Carbon hoog op meerdere AI-benchmarks, maar tijdens de gefaseerde uitrol hebben ontwikkelaars en consumenten nog geen toegang.

Door Gepubliceerd door Oossa: 2 min lezen

FlyD · Unsplash

Google kondigde Gemini 4 Carbon op 28 oktober aan en omschreef het als zijn krachtigste model voor cybersecurity en langdurige taken. De toegang begint bij een geselecteerde groep cyberverdedigers via Googles Fairwind-programma. Ontwikkelaars, bedrijven en consumenten hebben nog geen algemene toegang; Google zegt de toegang te willen uitbreiden nadat het feedback heeft verzameld en de veiligheidsmaatregelen heeft verbeterd.

Volgens Google staat het model ook bovenaan de Intelligence Index V5 van Artificial Analysis. Tom’s Hardware meldt dat Carbon een score van 59 behaalde, één punt hoger dan Claude Opus 5.5, en eerste werd bij vier van de negen evaluaties in de index. Ook eindigde het bovenaan in de AA-Omniscience v1.1-test van Artificial Analysis, die hallucinaties en het ophalen van bekende informatie meet. Dat is een klassering op een benchmark, geen garantie dat Carbon bij dagelijks gebruik geen fouten maakt.

Wat laten de veiligheidstests zien?

Google meldt scores van 88.2% op SEC-bench Pro, dat softwarekwetsbaarheden opspoort; 54.8% op ExploitGym, dat test of kwetsbaarheden kunnen worden uitgebuit; en 71.0% op CWE-bench, dat kwetsbaarheden verhelpt. Volgens Google zijn deze tests uitgevoerd zonder de ingebouwde veiligheidsmaatregelen, en zijn de resultaten toonaangevend. Het bedrijf zegt ook dat Carbon in interne tests meer dan twee keer zo vaak als Gemini 4 Argon veilige code genereerde. Het Chrome-team van Google zegt dat Carbon bij het maken van hoogwaardige patches meer dan 10 keer beter presteerde dan een ander geavanceerd model van een concurrent. In de aankondiging noemt Google dat model niet en geeft het geen verdere details over de tests.

Volgens Google boekte Carbon 89 punten vooruitgang op WebDev Arena en staat het met een score van 1,768 op de vierde plaats. Het model is volgens het bedrijf ook ontworpen voor complexe taken in meerdere stappen, die dagen kunnen duren. Dit zijn resultaten en mogelijkheden die Google zelf rapporteert; uit de aankondiging blijkt niet hoe het model presteert bij alle codeer- of beveiligingstaken van gebruikers.

Wanneer krijgen meer gebruikers toegang?

Google zegt Carbon geleidelijk beschikbaar te stellen aan meer vertrouwde partners. Daarna moet het via Googles producten toegankelijk worden voor ontwikkelaars, bedrijven en consumenten, “as soon as possible”. Een datum voor die bredere introductie is nog niet bekend. Ars Technica merkt op dat Carbon ongeveer twee weken na Gemini 4 Argon komt; Google zegt dat het voortbouwt op Argon.

Google zegt dat de introductieprijs gelijk is aan die van Argon: $2 per miljoen invoertokens en $10 per miljoen uitvoertokens. Invoertokens uit de cache kosten 95% minder dan het standaardtarief voor invoer. Die prijzen zijn nuttig voor ontwikkelaars die toekomstig gebruik plannen, maar betekenen niet dat het model nu al voor hen beschikbaar is.

Waarom het ertoe doet

Cyberverdedigers in de eerste Fairwind-groep van Google zijn de eersten die Carbon kunnen uitproberen; ontwikkelaars en gewone gebruikers hebben nog geen datum waarop algemene toegang begint. Google heeft prijzen voor een latere introductie bekendgemaakt, maar het is nog niet getest of de betere benchmarks ook betere resultaten opleveren voor het werk van een individuele gebruiker.

Was dit artikel nuttig?
Delen

Lees ook

Oossa · Nieuwsbrief

De AI-week, uitgelegd

Elke maandag: het nieuws dat ertoe doet, in gewone taal. Gratis, geen spam.