Oossa

llama.cpp b11792 mantiene più dati sulla GPU

La nuova versione del runtime LLM open source include nuovi binari e un’ottimizzazione che lascia i dati più a lungo sulla GPU.

BreveDi Pubblicato da Oossa: 1 min di lettura

Il team ggml‑org ha rilasciato llama.cpp versione b11792 il 2026‑10‑21. L’aggiornamento modifica la chiamata set_rows, consentendo ai dati di rimanere sulla GPU e migliorando la velocità per chi usa una GPU. Sono ora disponibili binari precompilati per macOS Apple Silicon, macOS Intel, iOS e diverse build di Ubuntu (CPU, Vulkan, CUDA 12.8). I link alla release sono pubblicati nella pagina del tag su GitHub.

Nelle note di rilascio, la modifica è descritta così: «place d2t by its set_rows use so it can stay on the GPU (#30912)».

Perché conta

Gli sviluppatori possono eseguire i modelli Llama più velocemente su GPU compatibili, evitando trasferimenti di dati aggiuntivi.

Questo articolo ti è stato utile?
Condividi

Leggi anche

Oossa · Newsletter

La settimana dell'IA, spiegata

Ogni lunedì: le notizie che contano, in parole semplici. Gratis, niente spam.