Oossa

llama.cpp b11804 में OpenCL argmax सपोर्ट जुड़ा

ओपन-सोर्स LLM रनटाइम में OpenCL के लिए F32 से I32 argmax और macOS, Linux व iOS के नए बाइनरी शामिल हैं।

संक्षिप्तलेखक: Oossa द्वारा प्रकाशित: 1 मिनट पढ़ना

ggml‑org ने 2026‑10‑22 को llama.cpp का b11804 संस्करण जारी किया। इस अपडेट में OpenCL रूटीन जोड़ा गया है, जो 32-बिट फ्लोट से 32-बिट इंटीजर के लिए argmax निकालता है। इससे GPU पर इन्फरेंस की रफ्तार बेहतर होती है। इसमें Apple Silicon, Intel macOS, iOS और Ubuntu के कई संस्करणों (CPU, Vulkan, CUDA) के लिए नए प्री-बिल्ट बाइनरी भी शामिल हैं। ये बदलाव OpenCode और Qualcomm के Li He ने किए हैं।

यह क्यों मायने रखता है

अब डेवलपर OpenCL-संगत GPU पर llama.cpp मॉडल तेज़ी से चला सकते हैं, जिससे शौकिया AI प्रोजेक्ट्स के लिए हार्डवेयर के विकल्प बढ़ते हैं।

क्या यह लेख उपयोगी था?
साझा करें

यह भी पढ़ें

Oossa · न्यूज़लेटर

AI का हफ़्ता, आसान भाषा में

हर सोमवार: जानने लायक खबरें, सरल भाषा में। मुफ़्त, कोई स्पैम नहीं।