Oossa

llama.cpp b11623 aggiunge un percorso di convoluzione per GPU AMD

La versione introduce un percorso conv2d basato su SIMT per le GPU AMD prive di supporto WMMA. Il progetto non fornisce dati sulle prestazioni della modifica.

BreveDi Pubblicato da Oossa: 1 min di lettura

Il team di ggml-org ha pubblicato llama.cpp b11623, aggiungendo un percorso SIMT implicit GEMM per le convoluzioni 2D sulle GPU AMD senza supporto WMMA. La modifica esclude questo percorso per le riduzioni brevi; le note di rilascio non quantificano la velocità né specificano quali schede AMD ne traggano beneficio. Sono disponibili build scaricabili per macOS, iOS e diverse piattaforme Linux.

Perché conta

Per chi sviluppa o usa llama.cpp su GPU AMD, questa novità aggiunge un percorso di convoluzione quando WMMA non è disponibile, ma le note non chiariscono l’impatto sulle prestazioni né quali componenti hardware siano supportati.

Questo articolo ti è stato utile?
Condividi

Leggi anche

Oossa · Newsletter

La settimana dell'IA, spiegata

Ogni lunedì: le notizie che contano, in parole semplici. Gratis, niente spam.