# MA-Bench testar språkmodeller på militära planeringsuppgifter

> Den nya MA‑Bench-datamängden prövar hur väl språkmodeller omvandlar röriga dokument till operativa planer. Den bästa modellen klarade 62 procent av bedömningspunkterna.

Oossa · 2026-10-15 · https://oossa.com/sv/ma-bench-evaluates-language-models-on-military-planning-tasks

Forskare har lanserat MA‑Bench, ett test som mäter språkmodellers förmåga att ta fram en operativ plan utifrån en samling motstridiga dokument. Testet omfattar tio scenarier utformade av experter. Varje scenario innehåller tio till tolv syntetiska dokument och 1 257 godkänd/underkänd-krav formulerade av planerare. En bedömare baserad på en resonemangsmodell betygsätter modellernas planeringsunderlag och ger resultat som stämmer överens med en panel bestående av fyra planerare (Fleiss κ ≈ 0,42). Av tjugo ledande och öppna modeller fick den bästa 62 procent rätt enligt bedömningskriterierna.

## Fakta

- 10 scenarier med 1 257 krav formulerade av experter
- Den bästa modellen fick 62 procent rätt

## Varför det spelar roll

Resultatet visar att dagens språkmodeller fortfarande missar många planeringsbedömningar som kräver omfattande slutledning, vilket begränsar deras användning för verklig uppdragsanalys.

## Källor och referenser

1. [MA-Bench: Measuring Operational Planning in Language Models](https://arxiv.org/abs/2610.19138) – arXiv cs.LG, 2026-10-15

Senast uppdaterad: 2026-10-15