أتاحت StepFun نموذج المعاينة Step 5 بأوزان مفتوحة. ونشرت نقاط التحقق بصيغتي FP8 وBF16 على Hugging Face وModelScope. النموذج نظام sparse Mixture-of-Experts (MoE) يضم 600 مليار معلمة إجمالًا، لكن النشط منها لا يتجاوز 27 مليارًا لكل رمز. ويمكنه التعامل مع سياقات تصل إلى 1 مليون رمز، وهو مصمم لمهام الوكلاء طويلة الأمد.
لماذا يهم
بات بإمكان المطورين تجربة نموذج ضخم مفتوح الأوزان يدعم مدخلات نصية أطول بكثير مما تدعمه نماذج اللغة الكبيرة المعتادة.