# Studie: språkmodeller missar ofta uppdaterade vårdriktlinjer

> Forskare visar att stora språkmodeller känner igen nya medicinska råd men ofta inte tillämpar dem korrekt.

Oossa · 2026-10-23 · https://oossa.com/sv/study-finds-llms-often-miss-updated-medical-guidelines

En ny artikel på arXiv, publicerad 23 oktober 2026, undersöker hur väl stora språkmodeller (LLM:er – den typ av AI som ligger bakom verktyg som ChatGPT) hänger med när medicinska riktlinjer ändras. Forskarna tog fram ett testmaterial kallat ChronoEvo med 1 709 specifika riktlinjeändringar inom 12 typer av förändringar i medicinsk kunskap. De bad 14 olika LLM:er besvara kliniska frågor utifrån de uppdaterade rekommendationerna.

## Det visade testerna

Den huvudsakliga modellen i studien kände igen att en riktlinje hade ändrats i 90,8 procent av fallen och gav ett kliniskt korrekt svar i 80,2 procent av fallen. Men bara 58,5 procent av svaren tog fullt ut hänsyn till den nya rekommendationen. Det innebär en skillnad på 32,3 procentenheter mellan att upptäcka en ändring och att faktiskt tillämpa den nya vägledningen. Samma skillnad syntes i de 13 andra testade modellerna.

Två läkare granskade också 300 svar från modellerna och fann en liknande brist: en skillnad på 40,3 procentenheter mellan att upptäcka ändringar och att tillämpa dem fullt ut. Studien konstaterar att ändringar som påverkar hur stark en rekommendation är, eller vilka patienter som omfattas, särskilt ofta leder till att modellen ger inaktuella råd.

Forskarna testade en justering som de kallade ”revision-salience” och som lyfter fram den uppdaterade delen av en riktlinje. Den minskade mängden gammal information som modellen behöll och förbättrade den kliniska träffsäkerheten överlag, men minskade inte skillnaden när det gäller att fullt ut ta hänsyn till den nya vägledningen.

## Därför spelar det roll

För läkare och patienter som kan tänkas förlita sig på AI för medicinska råd innebär resultaten att även uppdaterade modeller fortfarande kan föreslå föråldrade behandlingar. Användare bör kontrollera AI-genererade medicinska rekommendationer mot aktuella officiella riktlinjer.

## Fakta

- Artikeln publicerades på arXiv 23 oktober 2026.
- ChronoEvo innehåller 1 709 riktlinjeändringar inom 12 typer av förändringar i medicinsk kunskap.
- Den huvudsakliga modellen kände igen ändringar i 90,8 procent av fallen och var kliniskt korrekt i 80,2 procent, men tog fullt ut hänsyn till vägledningen endast 58,5 procent av gångerna.
- Bland 14 modeller kvarstod en skillnad på omkring 32 procentenheter mellan att känna igen och att tillämpa ändringar.
- En läkargranskning av 300 svar visade en skillnad på 40,3 procentenheter i granskningsurvalet.

## Varför det spelar roll

Läkare och patienter som använder AI-verktyg kan vilseledas av råd som verkar aktuella men ändå bygger på gamla riktlinjer. Studien visar att AI-utvecklare behöver bättre metoder för att säkerställa att modeller inte bara upptäcker uppdateringar utan också tillämpar dem korrekt.

## Källor och referenser

1. [Large language models show systematic failures in incorporating evolving medical knowledge](https://arxiv.org/abs/2610.30631) – arXiv, 2026-10-23

Senast uppdaterad: 2026-10-23