أضافت NVIDIA نموذجًا لغويًا كبيرًا جديدًا باسم Dory1.0‑4B إلى Hugging Face. يضم النموذج 4 مليارات مُعامل، ويمكنه التعامل مع سياقات تصل إلى 256 K رمز. ويستخدم بنية تكرارية كامنة تتيح للمستخدمين الموازنة بين القدرة الحاسوبية والدقة من دون إعادة التدريب. ويتوفر بصيغ متعددة، منها BF16 وNVFP4 بدقة 4 بت، ويمكن استخدامه في المشاريع التجارية وغير التجارية بموجب ترخيص OpenMDW‑1.1.
لماذا يهم
يمكن للمطورين تشغيل نموذج واحد يضم 4 مليارات مُعامل على أجهزة بقدرات متفاوتة، مع دعم المطالبات الطويلة جدًا، ما يقلل الحاجة إلى نماذج متخصصة متعددة.
