# NVIDIA lanza Nemotron‑Labs‑Sigma, un modelo de difusión más rápido

> NVIDIA publica 14 checkpoints abiertos de modelos de 3B y 8B parámetros, que generan texto hasta 4.2× más rápido que los LLM autorregresivos tradicionales.

Oossa · 2026-11-20 · https://oossa.com/es/nvidia-releases-nemotron-labs-sigma-a-faster-continuous-diffusion-language-model

NVIDIA anunció una nueva familia de modelos de lenguaje llamada Nemotron‑Labs‑Sigma. La empresa publicó 14 checkpoints —versiones de tres mil millones de parámetros (3B) y ocho mil millones de parámetros (8B)— en el repositorio de modelos Hugging Face. Los modelos usan un proceso de difusión continua que elimina el ruido del texto en un espacio de embeddings aprendido de 16 dimensiones. Según NVIDIA, esto permite generar texto hasta 4.20 veces más rápido que con la decodificación autorregresiva estándar.

## ¿Qué diferencia al enfoque de difusión?

Los modelos de lenguaje grandes (LLM) tradicionales generan un token tras otro, un método conocido como decodificación autorregresiva. Nemotron‑Labs‑Sigma, en cambio, parte de una representación ruidosa de la oración completa y elimina el ruido de forma iterativa, de manera similar a como los modelos de difusión de imágenes crean imágenes. Como la difusión se ejecuta en un espacio de pocas dimensiones, NVIDIA puede destilar el proceso en muy pocos pasos —tan solo dos pasadas hacia delante en el modelo 3B— y mantener una alta calidad. La empresa también añadió un modo «especulativo» de un solo paso para el checkpoint 8B, que aumenta otras 3.5× el rendimiento en la prueba de referencia GB200.

## Rendimiento en pruebas de referencia

En el artículo que presentó los modelos, los autores compararon Sigma con modelos de difusión discreta de última generación y con modelos autorregresivos estándar en diversas tareas. Tras el preentrenamiento, Sigma superó a los demás en pruebas de matemáticas y programación, como GSM8K, HumanEval y MBPP. Después del ajuste fino supervisado, las ventajas fueron mayores en problemas más difíciles, como MATH‑500 y AIME, y las mejoras más notables se observaron en la generación de código. Las versiones destiladas de pocos pasos ofrecieron una aceleración de aproximadamente 8× en tareas de matemáticas y de 4× en tareas de programación, con una pequeña pérdida de precisión.

## Los hechos

- NVIDIA publicó 14 checkpoints abiertos —tres modelos base 3B y tres 8B, además de variantes destiladas— el 20 Nov 2026.
- El proceso de difusión funciona en un espacio de embeddings aprendido de 16 dimensiones y puede decodificar hasta 4.20 veces más rápido que la decodificación autorregresiva.
- La destilación de pocos pasos ofrece una aceleración de aproximadamente 8× en pruebas de matemáticas y de 4× en pruebas de programación, con una pérdida de precisión insignificante.
- La decodificación especulativa de un solo paso en el modelo 8B destilado añade una mejora adicional de ~3.5× en el rendimiento frente a su contraparte autorregresiva en la prueba de referencia GB200.
- Los pesos y el código del modelo están disponibles públicamente en Hugging Face; el artículo correspondiente está en arXiv (arXiv:2610.02665).

## Por qué importa

Para desarrolladores que necesitan respuestas rápidas —por ejemplo, en asistentes de programación o chatbots en tiempo real—, la decodificación más rápida de Sigma podría reducir la latencia y los costos de la nube. Además, los checkpoints abiertos permiten a los investigadores experimentar con generación basada en difusión sin tener que crear los modelos desde cero. Aún está pendiente la verificación independiente de las afirmaciones sobre velocidad, así que los resultados en situaciones reales podrían variar.

## Fuentes y referencias

1. [NVIDIA AI Releases Nemotron-Labs-Sigma, a Continuous Diffusion Language Model with 14 checkpoints at 3B/8B](https://www.marktechpost.com/2026/11/20/nvidia-nemotron-labs-sigma-continuous-diffusion-language-model/) – MarkTechPost, 2026-11-20
2. [Large Language Continuous Diffusion Models](https://arxiv.org/abs/2610.02665) – arXiv, 2026-10-05
3. [NVIDIA](https://huggingface.co/collections/nvidia/nemotron-labs-sigma) – NVIDIA

Última actualización: 2026-11-20
