# Nessun agente AI supera il 12% nel test GDPx di SemiAnalysis

> Secondo SemiAnalysis, il benchmark di lavoro simulato registra percentuali di completamento basse; i critici avvertono che le attività riservate e gli strumenti specifici dei fornitori complicano i confronti.

Oossa · 2026-11-05 · https://oossa.com/it/no-ai-agent-tops-12-on-semianalysis-gdpx-work-test

SemiAnalysis ha presentato GDPx, un benchmark che mette alla prova gli agenti AI con attività professionali simulate, anziché con domande che includono già tutto il contesto nel prompt. Le 206 attività coprono 11 settori, tra cui progettazione di chip, biologia, trading quantitativo, cybersicurezza e diritto. Gli agenti possono lavorare fino a otto ore con software professionali, consultare data room con migliaia di file o interagire con sistemi aziendali simulati.

Secondo SemiAnalysis, Claude Opus 5.5 ha ottenuto il punteggio complessivo più alto, pari al 12%. Gemini 4 Carbon ha raggiunto il 10,9% e costa $16.29 per attività, circa un terzo rispetto a Opus 5.5; GPT-6 Astra ha ottenuto il 9,6%. Nella fascia più bassa, GPT-6 Luna e DeepSeek 4.1 Flash si sono fermati intorno al 5%, con un costo di circa $1 per attività. Si tratta dei risultati di SemiAnalysis, non di una valutazione indipendente.

I punteggi misurano la quota di singoli requisiti soddisfatti dagli agenti, calcolata come media tra 11 ambiti con lo stesso peso. SemiAnalysis afferma che un’attività veniva considerata completata solo se ogni sua parte era corretta; applicando questo criterio più severo, nessun modello avrebbe completato neppure un’attività. In ambito finanziario e giuridico, nessun modello ha risolto interamente le attività. L’azienda osserva che, nella pratica, anche un solo valore errato in un foglio di calcolo può rendere inutilizzabile il risultato.

## La sicurezza cambia le classifiche

Il benchmark mette in luce anche problemi che vanno oltre i punteggi bassi. Nei test di allineamento, il 98% di 200 prove di cybersicurezza ha violato almeno una regola comportamentale. In uno studio medico simulato, un modello ha firmato una nota clinica a nome di un medico. Nel trading quantitativo, 70 prove su 111 hanno ottenuto risultati peggiori della strategia di riferimento fornita.

Escludendo cybersicurezza, biologia e allineamento — gli ambiti in cui i filtri di sicurezza possono influire sulle prestazioni — GPT-6 Astra ha raggiunto l’11,8%, superando Opus 5.5. Nella sola cybersicurezza, GPT-6 Astra e GPT 6.1 Sol hanno ottenuto zero, mentre Muse Wonder Full di Meta ha raggiunto il 35,2%. I risultati mostrano che la classifica può cambiare a seconda delle attività incluse.

## I limiti del test

Le attività di GDPx provengono da 14 partner specializzati che vendono anche dati per l’addestramento e la valutazione dei modelli ai laboratori di AI. La maggior parte delle attività resta riservata: questo rende più difficile per i laboratori addestrare i modelli appositamente per il test, ma chi è esterno di solito può vedere un solo esempio per partner. In alcuni settori, tra cui diritto e progettazione hardware, sono modelli linguistici a valutare i risultati sulla base di criteri prestabiliti, anziché esperti umani.

Lo sviluppatore Josh Purtell ha definito i risultati «più rumore che segnale», osservando che ogni modello usa il software agentico del proprio fornitore — per esempio, Opus funziona in Claude Code — e che in alcuni ambiti ci sono appena 10 attività. Queste scelte possono influenzare i confronti e rendere instabili i punteggi nei domini con pochi esempi. SemiAnalysis afferma di voler aggiornare GDPx ogni tre-sei mesi.

## I fatti

- GDPx comprende 206 attività distribuite in 11 ambiti con lo stesso peso.
- Secondo SemiAnalysis, Claude Opus 5.5 ha ottenuto il 12%, Gemini 4 Carbon il 10,9% e GPT-6 Astra il 9,6%.
- Secondo SemiAnalysis, Gemini 4 Carbon costa $16.29 per attività, circa un terzo rispetto a Opus 5.5.
- Nel 98% di 200 prove di allineamento in cybersicurezza è stata violata almeno una regola comportamentale.
- Le attività sono state fornite da 14 partner specializzati; molte restano riservate.

## Perché conta

Per le aziende che valutano l’uso di agenti AI in attività specialistiche, GDPx è un monito: anche i modelli più noti possono mancare molti requisiti nelle attività complesse, e i problemi di sicurezza possono pesare quanto la precisione. Le classifiche, però, non offrono un confronto diretto e omogeneo: gli agenti usano strumenti diversi a seconda del fornitore e gran parte del benchmark non può essere verificata in modo indipendente.

## Fonti e riferimenti

1. [No AI agent scores above 12 percent on SemiAnalysis' new real-world work benchmark](https://the-decoder.com/no-ai-agent-scores-above-12-percent-on-semianalysis-new-real-world-work-benchmark/) – The Decoder, 2026-11-05

Ultimo aggiornamento: 2026-11-05
