Oossa

llama.cpp b12344 отменяет вызовы инструментов при разрыве соединения

В новой версии llama.cpp сервер отменяет вызовы инструментов MCP, если клиент отключается или превышает время ожидания. Также доступны сборки для нескольких платформ.

ЗаметкаАвтор: Опубликовано Oossa: 1 мин чтения

Команда ggml-org выпустила llama.cpp b12344. В этой версии сервер отменяет вызовы инструментов MCP, если клиент отключается или превышает время ожидания. MCP позволяет ИИ-приложениям подключаться к внешним инструментам. На странице релиза также доступны сборки для macOS, iOS и нескольких систем Linux.

Почему это важно

Для разработчиков, запускающих серверы llama.cpp, это изменение должно останавливать вызовы инструментов после отключения клиента или истечения времени ожидания. В примечаниях к релизу не указано, насколько это может снизить нагрузку на сервер.

Эта статья была полезной?
Поделиться

Читайте также

Oossa · Рассылка

Неделя ИИ — простыми словами

Каждый понедельник: главное за неделю понятным языком. Бесплатно, без спама.