Anthropic ha annunciato che il suo modello Fable 5.2 ha completato il 41,3 % dei lavori inclusi in un benchmark di progetti freelance reali. La prova, condotta da Scale Labs, misura la capacità di un’IA di produrre risultati di qualità professionale su incarichi completi, non soltanto su singole attività. Per fare un confronto, Manus, il sistema migliore di un anno fa, era riuscito a completarne appena il 2,5 %. Fable 5.2 ha quindi portato a termine oltre sedici volte più incarichi rispetto al primo leader. Il benchmark comprende 240 progetti selezionati tra quelli di 358 freelance verificati di Upwork. Il valore complessivo degli incarichi è di circa $144,000, con un costo medio per progetto di $632.60 e circa 29 ore di lavoro umano. Le attività spaziano dal montaggio video alla progettazione CAD, dallo sviluppo di videogiochi all’analisi dei dati. Gli agenti lavorano in un ambiente virtuale che include strumenti professionali come Blender, GIMP e Audacity, oltre a generatori di IA specializzati per immagini, audio e video. Secondo Scale Labs, Fable 5.2 ha registrato i maggiori progressi nel montaggio audio e musicale, nella progettazione architettonica e d’interni e nella creazione di modelli 3D. È riuscito anche a gestire progetti più lunghi e complessi, che gli agenti precedenti non erano in grado di completare. Quasi 50 dei suoi incarichi portati a termine erano attività che nessuna IA inclusa nella prova aveva mai risolto prima. I modelli successivi in classifica sono stati Opus 5.5 di Anthropic, con il 21,25 %, e GPT‑6 Astra di OpenAI, con il 20,83 %. Gemini Argon 4 di Google si è piazzato al quinto posto, con il 17,08 %. Modelli più vecchi come GPT‑5.2 e Gemini 3 Pro sono rimasti sotto il 3 %. Esperti umani hanno esaminato manualmente ogni risultato dell’IA, aprendo i file con i software pertinenti e confrontandoli con il lavoro del freelance. I tentativi di automatizzare questa revisione affidandola a un’altra IA non hanno funzionato: i revisori fanno fatica a individuare difetti tecnici sottili.
Perché questo progresso è importante
Per le aziende che si affidano ai freelance, i risultati suggeriscono che agenti di IA come Fable 5.2 potrebbero iniziare a occuparsi di una quota significativa dei progetti di routine nel campo del design e dei contenuti multimediali, riducendo potenzialmente costi e tempi di consegna. La prova ha però evidenziato anche limiti nella progettazione di prodotti industriali e nell’animazione; inoltre, i revisori hanno notato che i risultati dell’IA possono essere incompleti o presentare difetti tecnici. Finché queste lacune non saranno colmate, la supervisione umana resterà necessaria.
Perché conta
Le aziende possono valutare l’impiego di agenti di IA per una gamma più ampia di incarichi freelance, soprattutto nel montaggio audio, nell’architettura e nella modellazione 3D, con possibili risparmi sui costi. Gli errori ancora presenti, tuttavia, rendono necessaria la revisione e la rifinitura dei risultati dell’IA da parte dei freelance: la transizione sarà quindi graduale.