Oossa

llama.cpp adiciona normalização NFC opcional para tokenizadores

A biblioteca open source de inferência LLaMA agora permite ativar a normalização Unicode NFC em tokenizadores Unigram.

NotaPor Publicado pelo Oossa: 1 min de leitura

A equipe ggml‑org lançou a versão b11612 do llama.cpp em 14 Oct 2026. A atualização adiciona uma etapa opcional de NFC (Normalization Form C) para tokenizadores Unigram, o que pode melhorar o tratamento de textos Unicode. A mudança foi feita com a ajuda do Codex e inclui uma pequena limpeza nos arquivos de teste e nos avisos do linter. A versão também lista compilações para várias plataformas, do macOS com Apple Silicon ao Windows com CUDA 13.

Por que importa

Desenvolvedores que executam modelos LLaMA agora podem obter uma tokenização mais consistente de caracteres acentuados ou compostos, reduzindo resultados inesperados em aplicativos multilíngues.

Este artigo foi útil?
Compartilhar

Leia a seguir

Oossa · Newsletter

A semana em IA, explicada

Toda segunda-feira: as notícias que valem a pena, em linguagem simples. Grátis, sem spam.