Oossa

llama.cpp b11804 får stöd för argmax i OpenCL

Den öppna LLM-miljön uppdateras med argmax från F32 till I32 i OpenCL och nya binärfiler för macOS, Linux och iOS.

NotisAv Publicerad av Oossa: 1 min läsning

ggml‑org släppte version b11804 av llama.cpp den 2026‑10‑22. Uppdateringen lägger till en OpenCL-rutin som beräknar argmax från 32-bitars flyttal till 32-bitars heltal, vilket ökar inferenshastigheten på GPU:er. Den innehåller också nya förbyggda binärfiler för Apple Silicon, Intel-macOS, iOS och flera Ubuntu-varianter (CPU, Vulkan, CUDA). Ändringarna har gjorts av OpenCode och Li He från Qualcomm.

Varför det spelar roll

Utvecklare kan nu köra llama.cpp-modeller snabbare på OpenCL-kompatibla GPU:er, vilket ger fler hårdvarualternativ för hobbyprojekt inom AI.

Var den här artikeln användbar?
Dela

Läs vidare

Oossa · Nyhetsbrev

Veckans AI, förklarad

Varje måndag: nyheterna som är värda att känna till, på enkel svenska. Gratis, ingen spam.