Oossa

llama.cpp b12329 يسرّع معالجة الأوزان ويضيف ملفات تنفيذية جديدة

يأتي الإصدار b12329 من بيئة تشغيل النماذج اللغوية الكبيرة مفتوحة المصدر بتحسينات لـ CUDA وملفات تنفيذية جاهزة لأنظمة macOS وiOS وLinux.

خبر موجزبقلم نشرته Oossa: 1 دقائق قراءة

أصدر فريق ggml‑org الإصدار b12329 من llama.cpp. ويضيف تحسينًا لـ CUDA يدمج معالجة مقياس الأوزان في عمليات الكتابة الخاصة بضرب المصفوفات، ما يسرّع التعامل مع نقاط التحقق بصيغة nvfp4. ويضم التحديث أيضًا ملفات تنفيذية جديدة جاهزة لأجهزة Apple Silicon وأجهزة Mac بمعالجات Intel ونظام iOS وعدة توزيعات من Linux. ويمكن تنزيل التغييرات من صفحة الإصدار على GitHub.

لماذا يهم

يستطيع المطورون تشغيل نماذج Llama بسرعة أكبر على وحدات معالجة الرسومات من NVIDIA، والاستفادة من ملفات تنفيذية جاهزة لمزيد من المنصات.

هل كان هذا المقال مفيدًا؟
مشاركة

اقرأ أيضًا

Oossa · النشرة البريدية

أسبوع الذكاء الاصطناعي، مشروحًا

كل يوم اثنين: الأخبار التي تستحق المعرفة، بلغة بسيطة. مجانًا وبلا رسائل مزعجة.