# llama.cpp добавила опциональную нормализацию NFC для токенизаторов

> Теперь в библиотеке llama.cpp с открытым исходным кодом можно включить нормализацию Unicode NFC для токенизаторов Unigram.

Oossa · 2026-10-14 · https://oossa.com/ru/llama-cpp-adds-optional-nfc-normalization-for-tokenizers

Команда ggml-org выпустила версию b11612 llama.cpp 14 Oct 2026. В обновлении появилась возможность включить этап нормализации NFC (Normalization Form C) для токенизаторов Unigram — это может улучшить обработку текста Unicode. Изменение подготовили при помощи Codex; в релиз также вошли небольшая чистка тестовых файлов и исправления предупреждений линтера. Кроме того, опубликованы сборки для множества платформ — от Mac с Apple Silicon до Windows с CUDA 13.

## Факты

- Релиз с тегом b11612 опубликован 14 Oct 2026
- Добавлена опциональная нормализация NFC для токенизаторов Unigram

## Почему это важно

Разработчики, запускающие модели LLaMA, теперь могут добиться более единообразной токенизации символов с диакритическими знаками и составных символов, снизив вероятность неожиданных результатов в многоязычных приложениях.

## Источники и ссылки

1. [ggml-org/llama.cpp b11612](https://github.com/ggml-org/llama.cpp/releases/tag/b11612) – llama.cpp, 2026-10-14

Обновлено: 2026-10-14