Oossa

llama.cpp b12091 сохраняет и восстанавливает состояние MTP

В предварительной версии изменена работа llama.cpp со скрытым состоянием при создании контрольных точек MTP. Также доступны сборки для разных операционных систем и аппаратных платформ.

ЗаметкаАвтор: Опубликовано Oossa: 1 мин чтения

Проект llama.cpp выпустил предварительную версию b12091 4 ноября 2026 года. Главное изменение — сохранение и восстановление скрытого состояния MTP, метода спекулятивного декодирования, при создании контрольных точек. Согласно примечаниям к выпуску, сохраняется только граничная строка скрытого состояния; строки проверки заново формируются при поддерживаемых сценариях восстановления.

В выпуск вошли сборки для macOS, iOS, Linux, Android и Windows, в том числе варианты для разных процессоров и ускорителей. В примечаниях не описано, как это изменение влияет на производительность.

Почему это важно

Для разработчиков, использующих MTP в llama.cpp, это изменение влияет на сохранение скрытого состояния при поддерживаемом восстановлении. В примечаниях к выпуску не указано, повышает ли оно скорость или надёжность.

Эта статья была полезной?
Поделиться

Читайте также

Oossa · Рассылка

Неделя ИИ — простыми словами

Каждый понедельник: главное за неделю понятным языком. Бесплатно, без спама.