Oossa

llama.cpp b11769 migliora la gestione delle disconnessioni

La versione b11769 della libreria open source llama.cpp aggiorna il routing del server per annullare rapidamente le richieste e aggiunge nuove build binarie per macOS, Linux e iOS.

BreveDi Pubblicato da Oossa: 1 min di lettura

Il team ggml-org ha pubblicato la versione b11769 di llama.cpp. L’aggiornamento corregge un bug per cui il router del server non inoltrava correttamente ai processi figli i segnali di disconnessione dei client, con possibili ritardi nell’annullamento delle richieste. La modifica elimina anche un test sensibile alle variazioni temporali. Sono ora disponibili nuovi binari precompilati per macOS con Apple Silicon, macOS con processori Intel, iOS e diverse varianti di Ubuntu.

Perché conta

Gli sviluppatori possono eseguire llama.cpp in locale con un annullamento delle richieste più affidabile, riducendo il calcolo sprecato quando le attività vengono interrotte.

Questo articolo ti è stato utile?
Condividi

Leggi anche

Oossa · Newsletter

La settimana dell'IA, spiegata

Ogni lunedì: le notizie che contano, in parole semplici. Gratis, niente spam.