Oossa

llama.cpp adiciona reorganização de tensores no Hexagon e novas quantizações

A versão b11680, lançada em 16 de outubro de 2026, reformula o suporte ao Hexagon, adiciona get-rows em blocos para Q5_K e tensores k-quant brutos, além de ampliar o suporte a back-ends de hardware.

NotaPor Publicado pelo Oossa: 1 min de leitura

A biblioteca de código aberto llama.cpp lançou a versão b11680 em 16 de outubro de 2026. A atualização reformula o código para a NPU Hexagon: elimina uma solução improvisada, adiciona a reorganização de tensores para pesos F16/F32/BF16 e oferece suporte a get-rows em blocos para Q5_K e a tensores k-quant brutos. As mudanças também simplificam vários kernels internos e melhoram o desempenho em diversos back-ends, incluindo CPU, CUDA, Vulkan e dispositivos compatíveis com Hexagon. O projeto lista versões para macOS, Linux, Android, Windows e várias configurações do openEuler.

Por que importa

Agora, desenvolvedores podem executar modelos do llama.cpp com mais eficiência em celulares com Hexagon e outros dispositivos especializados.

Este artigo foi útil?
Compartilhar

Leia a seguir

Oossa · Newsletter

A semana em IA, explicada

Toda segunda-feira: as notícias que valem a pena, em linguagem simples. Grátis, sem spam.