Oossa

Обновление llama.cpp исправило ошибку масштабирования Qwen2VL

В релизе b12385 исправлена ошибка масштабирования, из-за которой Qwen2VL выдавал бессмыслицу. Это улучшило работу модели на CUDA и CPU.

ЗаметкаАвтор: Опубликовано Oossa: 1 мин чтения

14 ноября 2026 года вышла версия b12385 библиотеки llama.cpp с открытым исходным кодом. Обновление исправляет ошибку в модели Qwen2VL: коэффициенты масштабирования для слоёв прямого распространения не применялись. В результате модель выдавала бессмысленные ответы: perplexity составляла около 1 e6 на CUDA, а на CPU возникало значение NaN. Исправление передаёт правильные коэффициенты в процедуру сборки и восстанавливает нормальную работу модели.

Почему это важно

Разработчики, использующие llama.cpp, теперь могут надёжно запускать Qwen2VL и не получать некорректные результаты в своих приложениях.

Эта статья была полезной?
Поделиться

Читайте также

Oossa · Рассылка

Неделя ИИ — простыми словами

Каждый понедельник: главное за неделю понятным языком. Бесплатно, без спама.