# MA-Bench toetst taalmodellen op militaire planning

> De nieuwe MA‑Bench-dataset test hoe goed taalmodellen rommelige documenten omzetten in operationele plannen; het best scorende model voldeed aan 62% van de beoordelingscriteria.

Oossa · 2026-10-15 · https://oossa.com/nl/ma-bench-evaluates-language-models-on-military-planning-tasks

Onderzoekers hebben MA‑Bench uitgebracht, een benchmark die meet hoe goed een taalmodel op basis van een reeks tegenstrijdige documenten een operationeel plan kan opstellen. De test omvat tien door experts opgestelde scenario’s, elk met tien tot twaalf synthetische documenten en 1,257 door planners opgestelde eisen waaraan wel of niet wordt voldaan. Een beoordelaar op basis van een redeneermodel beoordeelt de door de modellen gegenereerde plannen. De overeenstemming met een panel van vier planners is vergelijkbaar (Fleiss κ ≈ 0.42). Van twintig toonaangevende modellen en modellen met open gewichten behaalde het best scorende model 62% van de punten op de beoordelingscriteria.

## De feiten

- 10 scenario’s met 1,257 door experts opgestelde eisen
- Het best scorende model behaalde 62%

## Waarom het ertoe doet

De resultaten laten zien dat huidige taalmodellen nog veel beoordelingstaken rond planning missen waarbij complexe gevolgtrekkingen nodig zijn. Daardoor zijn ze beperkt inzetbaar voor analyses van echte missies.

## Bronnen en referenties

1. [MA-Bench: Measuring Operational Planning in Language Models](https://arxiv.org/abs/2610.19138) – arXiv cs.LG, 2026-10-15

Laatst bijgewerkt: 2026-10-15