ggml-orgチームは、クライアントが切断またはタイムアウトした際にMCPツール呼び出しをキャンセルするサーバー変更を含むllama.cpp b12344をリリースしました。MCPは、AIアプリが外部ツールに接続するための仕組みです。リリースページでは、macOS、iOS、および複数のLinuxシステム向けビルドも提供されています。
なぜ重要か
llama.cppサーバーを運用する開発者にとって、この変更はクライアントの切断やタイムアウト後もツール呼び出しが続くのを防ぐことを目的としています。ただし、サーバーの処理能力をどの程度節約できるかはリリースノートに記載されていません。