# Метод TRIAGE стабилизирует обучение Qwen с 4-битной точностью

> Исследователи представили TRIAGE — метод коррекции с учётом направления обновлений. Он позволяет сохранять 4-битные вычисления и достигать результатов полноточных моделей на математических тестах.

Oossa · 2026-10-07 · https://oossa.com/ru/triage-method-stabilizes-4-bit-rl-training-for-qwen-models

7 октября 2026 года команда Zhen Li представила новый метод TRIAGE. Он работает в формате NVFP4 — с 4-битным представлением весов и активаций — и балансирует обновления градиента политики при обучении с подкреплением. Метод выявляет расхождения на уровне сегментов и корректирует их в заданных пределах, не меняя вычисления в низкой точности. Тесты на Qwen3‑4B и Qwen3‑30B‑A3B показали стабильное обучение и качество на уровне полноточных моделей на пяти математических тестах, а скорость генерации ответов при обучении оказалась до 2,3 раза выше, чем у BF16.

## Факты

- Дата события: 2026-10-07 («среда, 7 октября 2026 года»)
- TRIAGE обеспечил до 2,3 раза более высокую пропускную способность генерации ответов при обучении, чем BF16

## Почему это важно

Метод позволяет разработчикам быстрее обучать большие языковые модели на 4-битном оборудовании без потери точности и экономить вычислительные ресурсы.

## Источники и ссылки

1. [TRIAGE: Direction-Aware Mismatch Stabilization of Native NVFP4 Reinforcement Learning](https://arxiv.org/abs/2610.07043) – arXiv cs.LG, 2026-10-07

Обновлено: 2026-10-07
