Oossa

PrimeIntellect تنشر شيفرة مُحسّن Dion على GitHub

يوفر المستودع الجديد PrimeIntellect‑ai/dion تطبيقات متوافقة مع PyTorch لمُحسّني Dion وMuon، مخصصة لتدريب النماذج الموزّع.

خبر موجزبقلم نشرته Oossa: 1 دقائق قراءة

نشرت PrimeIntellect‑ai مستودعًا على GitHub باسم dion، يضم تطبيقات فعّالة لمُحسّني Dion وMuon مخصصة لتدريب نماذج تعلّم الآلة الموزّع. تعمل الشيفرة مع إصدارات PyTorch الحديثة (v2.7 أو أحدث)، وتدعم التوازي القائم على DTensor، بما في ذلك DDP وFSDP2 والتوازي عبر الموترات. ويمكن للمستخدمين تثبيت الحزمة مباشرةً من المستودع باستخدام pip. ويتضمن ملف README نصوصًا نموذجية لتدريب نموذج GPT‑small على ثماني وحدات GPU.

لماذا يهم

يوفر هذا للم researchers مُحسّنًا جاهزًا للاستخدام وفعّالًا في الاتصالات، ما قد يسرّع تدريب النماذج واسعة النطاق.

هل كان هذا المقال مفيدًا؟
مشاركة

اقرأ أيضًا

Oossa · النشرة البريدية

أسبوع الذكاء الاصطناعي، مشروحًا

كل يوم اثنين: الأخبار التي تستحق المعرفة، بلغة بسيطة. مجانًا وبلا رسائل مزعجة.