Oossa

llama.cpp b12322 riduce l’uso della memoria

Il 12 Nov 2026 la libreria open source per l’inferenza LLaMA è stata aggiornata per evitare di caricare metadati del grafo inutilizzati, risparmiando RAM agli sviluppatori.

BreveDi Pubblicato da Oossa: 1 min di lettura

Il team ggml-org ha pubblicato il tag b12322 di llama.cpp il 12 Nov 2026. La modifica cambia il modo in cui i risultati del grafo riservano i metadati: vengono allocate solo le pagine necessarie, anziché inizializzare l’intera area riservata. In questo modo la libreria utilizza meno RAM durante l’inferenza.

L’aggiornamento è disponibile per tutte le piattaforme elencate, dalle CPU di macOS e Windows alle build per Linux con CUDA, Vulkan e OpenVINO.

Perché conta

Gli sviluppatori che eseguono modelli LLaMA su dispositivi con memoria limitata consumeranno meno RAM, e potranno usare modelli più grandi o svolgere più attività contemporaneamente con maggiore fluidità.

Questo articolo ti è stato utile?
Condividi

Leggi anche

Oossa · Newsletter

La settimana dell'IA, spiegata

Ogni lunedì: le notizie che contano, in parole semplici. Gratis, niente spam.