تیم ggml‑org نسخه b11757 از llama.cpp را منتشر کرد. این بهروزرسانی پس از تخلیهٔ استخر حافظهٔ قدیمی، CUDA graphها را پاکسازی میکند؛ تغییری که باید نشت حافظهٔ GPU را کاهش دهد. باینریهای ازپیشساخته اکنون برای macOS روی Apple Silicon، macOS روی Intel، iOS و چند نسخهٔ Ubuntu (با CPU، Vulkan و CUDA 12.8) در دسترساند. این نسخه در GitHub منتشر شده است.
چرا مهم است
این اصلاح برای توسعهدهندگانی که مدلهای Llama را روی GPUهای Nvidia اجرا میکنند، خطاهای کمبود حافظه را کاهش میدهد.