# МФТИ разработал метод распределения ресурсов при дообучении ИИ

> SimplexLoRA автоматически выделяет слоям языковой модели адаптеры разного размера, перераспределяя фиксированный бюджет параметров.

Oossa · 2026-10-26 · https://oossa.com/ru/article-2526407

МФТИ и «Т-Технологии» разработали SimplexLoRA — метод дообучения языковых моделей. Он оценивает, каким слоям нужны более крупные адаптеры, и распределяет между ними фиксированный бюджет параметров. Авторы сообщили, что метод проверили на 12 задачах и четырёх моделях, в том числе Llama 3.1 8B и Qwen3-8B.

По описанию разработчиков, после распределения ресурсов обучение продолжается обычным способом LoRA, а при использовании модели дополнительные вычисления не нужны. Исходный код опубликован открыто. Статью о методе планируют представить на конференции EMNLP 2026.

## Факты

- Проверка охватила 12 задач и четыре языковые модели.
- Исходный код SimplexLoRA опубликован в открытом доступе.

## Почему это важно

Разработчикам с ограниченной видеопамятью метод может помочь распределять бюджет дообучения между слоями; насколько он улучшает качество относительно LoRA в конкретных проектах, из приведённых данных не ясно.

## Источники и ссылки

1. [В МФТИ обучили нейросеть самостоятельно распределять ресурсы](https://www.cnews.ru/news/line/2026-10-26_v_mfti_obuchili_nejroset) – CNews, 2026-10-26

Обновлено: 2026-10-26
