Oossa

Atualização do llama.cpp para Vulkan corrige falhas no top‑k

A versão lançada em 8 de outubro de 2026 corrige um bug no Vulkan que causava travamentos e resultados incorretos quando valores infinitos ou NaN apareciam em cálculos de top‑k.

NotaPor Publicado pelo Oossa: 1 min de leitura

A biblioteca de código aberto llama.cpp lançou a versão b11505 em 2026-10-08. A atualização corrige um bug no shader Vulkan da operação top‑k. Antes, valores +inf e NaN eram ignorados e podiam causar travamentos em GPUs NVIDIA ou índices incorretos em GPUs AMD. A correção converte NaN em -inf, amplia o intervalo de buckets para contabilizar todos os valores e ajusta o caminho k = 1 para números negativos. Um novo teste, chamado test_top_k_inf, verifica esses casos.

Por que importa

Desenvolvedores que usam llama.cpp com Vulkan terão menos travamentos e resultados mais precisos na classificação de tokens quando os prompts contiverem valores extremos de ponto flutuante.

Este artigo foi útil?
Compartilhar

Leia a seguir

Oossa · Newsletter

A semana em IA, explicada

Toda segunda-feira: as notícias que valem a pena, em linguagem simples. Grátis, sem spam.