Oossa

افزودن نرمال‌سازی اختیاری NFC به llama.cpp

کتابخانه متن‌باز استنتاج LLaMA اکنون امکان فعال‌سازی نرمال‌سازی یونی‌کد NFC را برای توکن‌سازهای Unigram فراهم می‌کند.

خبر کوتاهنویسنده: منتشرشده توسط Oossa: 1 دقیقه مطالعه

تیم ggml‑org در 14 Oct 2026 نسخه b11612 از llama.cpp را منتشر کرد. این به‌روزرسانی مرحله‌ای اختیاری برای نرمال‌سازی NFC (Normalization Form C) به توکن‌سازهای Unigram اضافه می‌کند که می‌تواند پردازش متن‌های یونی‌کد را بهبود دهد. این تغییر با کمک Codex انجام شده و شامل پاک‌سازی جزئی فایل‌های آزمون و هشدارهای linter نیز می‌شود. در این انتشار، نسخه‌های قابل‌ساخت برای پلتفرم‌های مختلف هم فهرست شده‌اند؛ از macOS با Apple Silicon تا Windows با CUDA 13.

چرا مهم است

توسعه‌دهندگانی که مدل‌های LLaMA را اجرا می‌کنند، اکنون می‌توانند توکن‌سازی یکدست‌تری برای نویسه‌های دارای اعراب یا نویسه‌های ترکیبی داشته باشند و خروجی‌های غیرمنتظره را در اپلیکیشن‌های چندزبانه کاهش دهند.

آیا این مقاله مفید بود؟
اشتراک‌گذاری

بیشتر بخوانید

Oossa · خبرنامه

هفتهٔ هوش مصنوعی، به زبان ساده

هر دوشنبه: خبرهایی که ارزش دانستن دارند، به زبان ساده. رایگان و بدون هرزنامه.