# Amazon rende SGLang-Neuron disponibile per AWS Trainium

> Amazon offre ora SGLang-Neuron come container pubblico, permettendo di eseguire modelli linguistici di grandi dimensioni sui chip Trainium con il consueto flusso di lavoro SGLang.

Oossa · 2026-11-12 · https://oossa.com/it/amazon-makes-sglang-neuron-available-for-aws-trainium

Amazon ha annunciato che SGLang-Neuron è disponibile al pubblico tramite un AWS Deep Learning Container. Il plugin collega il sistema di serving SGLang ai chip AI AWS Trainium e consente di avviare modelli e generare rollout RL usando la nota API SGLang. Funziona con PyTorch nativo e supporta funzionalità come il mixture-of-experts e il trasferimento della cache KV tramite Elastic Fabric Adapter. Una guida introduttiva mostra come avviare il container su un’istanza EC2 Trainium3 e servire un modello da 120 miliardi di parametri.

## I fatti

- Data dell’annuncio: 2026‑11‑12 ("Thu Nov 12 2026 23:03:34 GMT+0100")
- Versione del container: v0.1.0-neuron-py314-sdk-2.33.0

## Perché conta

Gli sviluppatori possono ora eseguire modelli linguistici di grandi dimensioni sui chip Trainium di AWS senza modificare il codice SGLang, riducendo i costi e semplificando la distribuzione.

## Fonti e riferimenti

1. [Deploy frontier AI models on AWS Trainium with SGLang-Neuron](https://aws.amazon.com/blogs/machine-learning/deploy-frontier-ai-models-on-aws-trainium-with-sglang-neuron/) – AWS, 2026-11-12

Ultimo aggiornamento: 2026-11-12
