Oossa

پیش‌انتشار llama.cpp با GELU دقیق برای ModernBERT

کتابخانه متن‌باز Llama.cpp در ۹ اکتبر ۲۰۲۶ نسخه b11532 را منتشر کرد؛ این نسخه دقت رمزگذارهای ModernBERT را بهبود می‌دهد.

خبر کوتاهنویسنده: منتشرشده توسط Oossa: 1 دقیقه مطالعه

تیم ggml‑org پیش‌انتشاری از llama.cpp با برچسب b11532 منتشر کرد. این به‌روزرسانی، تابع فعال‌سازی GELU دقیق را برای رمزگذارهای ModernBERT اضافه می‌کند و نام‌های مستعار tanh‑GELU را نیز حفظ می‌کند. همچنین تابع GELU در Python را به پیاده‌سازی دقیق‌تری نگاشت می‌کند. این انتشار شامل نسخه‌های قابل‌اجرا برای پلتفرم‌های گوناگون، از Apple Silicon در macOS تا CUDA 13.4 در Windows است. کد منبع با یک کلید GPG تأییدشده امضا شده است.

چرا مهم است

توسعه‌دهندگان می‌توانند مدل‌های ModernBERT را با توابع فعال‌سازی دقیق‌تر به‌صورت محلی اجرا کنند و بدون استفاده از سرویس‌های ابری، کیفیت استنتاج را بهبود دهند.

آیا این مقاله مفید بود؟
اشتراک‌گذاری

بیشتر بخوانید

Oossa · خبرنامه

هفتهٔ هوش مصنوعی، به زبان ساده

هر دوشنبه: خبرهایی که ارزش دانستن دارند، به زبان ساده. رایگان و بدون هرزنامه.