# LRCC تضيف حوسبة مشروطة بالرموز إلى نماذج LLM المضغوطة منخفضة الرتبة

> تتيح طريقة LRCC الجديدة لنماذج Llama وQwen اختيار مسارات أبسط أو أغنى لكل رمز، ما يعزز الدقة من دون عتاد إضافي.

Oossa · 2026-10-08 · https://oossa.com/ar/lrcc-adds-token-dependent-computation-to-low-rank-compressed-llms

قدّم باحثون طريقة Low‑Rank Conditional Computation (LRCC)، التي تجعل نماذج اللغة المضغوطة أكثر ذكاءً. وتُزوَّد كل كتلة Transformer بموجّه صغير يختار بين عدة مسارات منخفضة الرتبة استنادًا إلى الرمز الحالي. والموجّهات هي الجزء الوحيد الذي يجري تدريبه، فيما تظل المصفوفات منخفضة الرتبة مجمّدة. وفي الاختبارات على Llama‑2‑7B وLlama‑3.2‑1B وQwen، حققت LRCC زيادة قدرها 7.6 نقطة في دقة المهام اللاحقة على Llama‑2‑7B مقارنةً بالضغط الثابت منخفض الرتبة، كما حسّنت مقياس الحيرة عند سرعة فك الترميز نفسها.

## الحقائق

- زيادة قدرها 7.6 نقطة مئوية في متوسط دقة المهام اللاحقة على Llama‑2‑7B
- نُشرت الورقة في 2026‑10‑08

## لماذا يهم

يمكن للمطوّرين تشغيل نماذج أقل كلفة تتكيف مع كل رمز وتحافظ على دقتها، ما يقلل تكاليف الحوسبة للتطبيقات التي تستخدم Llama أو Qwen.

## المصادر والمراجع

1. [LRCC: Generalizing Low-Rank Compression with Conditional Computation](https://arxiv.org/abs/2610.08858) – arXiv, 2026-10-08

آخر تحديث: 2026-10-08
