# StepFun открыла веса предварительной версии Step 5

> StepFun опубликовала контрольные точки FP8 и BF16 для MoE-модели на 600 миллиардов параметров: на каждый токен приходится 27 миллиардов активных параметров, а контекст может достигать 1 миллиона токенов.

Oossa · 2026-10-17 · https://oossa.com/ru/stepfun-opens-weights-for-step-5-preview-model

StepFun открыла веса предварительной версии модели Step 5. Контрольные точки в форматах FP8 и BF16 опубликованы на Hugging Face и ModelScope. Это разреженная модель типа «смесь экспертов» (MoE) с 600 миллиардами параметров, из которых для каждого токена активны только 27 миллиардов. Модель поддерживает контекст до 1 миллиона токенов и предназначена для агентных задач с длительным горизонтом планирования.

## Факты

- 600 миллиардов параметров всего, 27 миллиардов активных на каждый токен
- Контекстное окно — до 1 миллиона токенов

## Почему это важно

Разработчики могут экспериментировать с очень крупной моделью с открытыми весами, которая обрабатывает значительно более длинные тексты, чем типичные большие языковые модели.

## Источники и ссылки

1. [StepFun Releases Step 5 Preview Open Weights: 600B MoE, 27B Active, 1M Context](https://www.marktechpost.com/2026/10/16/stepfun-releases-step-5-preview-open-weights-600b-moe-27b-active-1m-context/) – MarkTechPost, 2026-10-17

Обновлено: 2026-10-17
