Oossa

llama.cpp b12322 minskar minnesanvändningen

Det öppna inferensbiblioteket LLaMA uppdaterades den 12 nov. 2026. En ändring gör att oanvända grafmetadata inte läses in, vilket sparar RAM för utvecklare.

NotisAv Publicerad av Oossa: 1 min läsning

Teamet bakom ggml-org publicerade taggen b12322 för llama.cpp den 12 nov. 2026. Ändringen påverkar hur grafresultat reserverar metadata: bara de sidor som behövs allokeras, i stället för att hela det reserverade utrymmet initieras. Det minskar mängden RAM som biblioteket använder under inferens.

Uppdateringen finns för alla plattformar i listan, från macOS och Windows med CPU till Linux-byggen med CUDA, Vulkan och OpenVINO.

Varför det spelar roll

Utvecklare som kör LLaMA-modeller på enheter med begränsat minne får lägre RAM-användning, vilket kan göra det möjligt att köra större modeller eller multitaska smidigare.

Var den här artikeln användbar?
Dela

Läs vidare

Oossa · Nyhetsbrev

Veckans AI, förklarad

Varje måndag: nyheterna som är värda att känna till, på enkel svenska. Gratis, ingen spam.