llama.cpp प्रोजेक्ट ने 22 अक्तूबर 2026 को b11811 संस्करण जारी किया। इस अपडेट में Q8_0 SVE dot-product GEMV और SVE i8mm GEMM कर्नेल जोड़े गए हैं, जो ARM CPU पर क्वांटाइज़्ड मॉडल के इन्फरेंस को तेज़ करते हैं। macOS Apple Silicon, Intel, iOS और Ubuntu के कई बिल्ड (CPU, Vulkan, CUDA 12.8) के लिए पहले से तैयार बाइनरी अब डाउनलोड के लिए उपलब्ध हैं।
यह क्यों मायने रखता है
डेवलपर नए ARM हार्डवेयर और Linux GPU पर बिना कस्टम कोड लिखे LLaMA मॉडल तेज़ी से चला सकते हैं।