Oossa

llama.cpp b11804 bringt Argmax-Unterstützung für OpenCL

Das Open-Source-LLM-Laufzeitsystem erhält F32-zu-I32-Argmax für OpenCL sowie neue Binärdateien für macOS, Linux und iOS.

KurzmeldungVon Von Oossa veröffentlicht: 1 Min. Lesezeit

ggml-org hat am 2026-10-22 Version b11804 von llama.cpp veröffentlicht. Das Update ergänzt eine OpenCL-Routine, die den Argmax-Wert aus 32-Bit-Gleitkommazahlen als 32-Bit-Ganzzahl berechnet und so die Inferenz auf GPUs beschleunigt. Außerdem enthält es neue vorgefertigte Binärdateien für Apple Silicon, Intel-Macs, iOS und verschiedene Ubuntu-Varianten (CPU, Vulkan, CUDA). Die Änderungen stammen von OpenCode und Li He von Qualcomm.

Warum es wichtig ist

Entwickler können llama.cpp-Modelle nun auf OpenCL-kompatiblen GPUs schneller ausführen. Das erweitert die Hardware-Auswahl für KI-Projekte von Hobbyentwicklern.

War dieser Artikel hilfreich?
Teilen

Als Nächstes lesen

Oossa · Newsletter

Die KI-Woche, erklärt

Jeden Montag: die Nachrichten, die man kennen sollte – verständlich. Kostenlos, kein Spam.