Oossa

llama.cpp b11804 voegt argmax-ondersteuning voor OpenCL toe

De open-sourceruntime voor LLM’s krijgt een F32-naar-I32-argmax-functie voor OpenCL en nieuwe binaries voor macOS, Linux en iOS.

Kort berichtDoor Gepubliceerd door Oossa: 1 min lezen

ggml-org heeft op 2026-10-22 versie b11804 van llama.cpp uitgebracht. De update voegt een OpenCL-routine toe die de argmax berekent van 32-bits floats naar 32-bits integers, waardoor inferentie op de GPU sneller wordt. Ook bevat de update nieuwe vooraf gebouwde binaries voor Apple Silicon, Intel-macs, iOS en verschillende Ubuntu-varianten (CPU, Vulkan, CUDA). De wijzigingen zijn gemaakt door OpenCode en Li He van Qualcomm.

Waarom het ertoe doet

Ontwikkelaars kunnen llama.cpp-modellen nu sneller draaien op OpenCL-compatibele GPU’s. Dat biedt meer hardwarekeuze voor AI-projecten van hobbyisten.

Was dit artikel nuttig?
Delen

Lees ook

Oossa · Nieuwsbrief

De AI-week, uitgelegd

Elke maandag: het nieuws dat ertoe doet, in gewone taal. Gratis, geen spam.