# Onderzoek: LLM’s passen nieuwe medische richtlijnen vaak niet goed toe

> Onderzoekers laten zien dat grote taalmodellen nieuw medisch advies herkennen, maar het vaak niet goed toepassen.

Oossa · 2026-10-23 · https://oossa.com/nl/study-finds-llms-often-miss-updated-medical-guidelines

Een nieuw artikel op arXiv, gepubliceerd op 23 October 2026, onderzoekt hoe goed grote taalmodellen (LLM’s – de AI achter hulpmiddelen als ChatGPT) veranderingen in medische richtlijnen bijhouden. De auteurs stelden een testset samen, ChronoEvo, met 1,709 specifieke richtlijnwijzigingen op 12 gebieden waarop medische kennis kan veranderen. Ze vroegen 14 verschillende LLM’s om klinische vragen te beantwoorden aan de hand van de bijgewerkte richtlijnen.

## Wat uit de tests bleek

Het belangrijkste model in het onderzoek herkende in 90.8% van de gevallen dat een richtlijn was herzien en gaf in 80.2% van de gevallen een klinisch correct antwoord. Toch verwerkte het de nieuwe aanbeveling maar in 58.5% van de antwoorden volledig. Dat is een verschil van 32.3 procentpunt tussen een wijziging herkennen en de nieuwe richtlijn daadwerkelijk toepassen. Dat verschil was ook zichtbaar bij de andere 13 geteste modellen.

Twee artsen beoordeelden ook 300 antwoorden van de modellen en constateerden een vergelijkbaar tekort: een verschil van 40.3 procentpunt tussen het herkennen van wijzigingen en het volledig toepassen ervan. Volgens het onderzoek is de kans extra groot dat verouderd advies in het antwoord blijft staan wanneer een wijziging de kracht van een aanbeveling verandert of bepaalt welke patiënten ervoor in aanmerking komen.

De auteurs probeerden een aanpassing die ze ‘revision-salience’ noemen en waarbij het gewijzigde deel van een richtlijn extra wordt benadrukt. Daardoor hield het model minder oude informatie vast en nam de algehele klinische juistheid toe, maar het verschil in de volledige toepassing van nieuwe richtlijnen verdween niet.

## Waarom dit belangrijk is

Voor artsen of patiënten die op AI vertrouwen voor medisch advies, betekent dit dat zelfs actuele modellen nog verouderde behandelingen kunnen aanbevelen. Gebruikers moeten aanbevelingen van AI controleren aan de hand van de meest recente officiële richtlijnen.

## De feiten

- Het artikel verscheen op arXiv op 23 October 2026.
- ChronoEvo bevat 1,709 richtlijnwijzigingen op 12 gebieden waarop medische kennis kan veranderen.
- Het belangrijkste model herkende wijzigingen in 90.8% van de gevallen en was in 80.2% klinisch correct, maar verwerkte de richtlijnen slechts in 58.5% van de gevallen volledig.
- Bij 14 modellen bleef een verschil van ongeveer 32 procentpunt bestaan tussen het herkennen van wijzigingen en het toepassen ervan.
- Een beoordeling door artsen van 300 antwoorden liet in de validatiesteekproef een verschil van 40.3 procentpunt zien.

## Waarom het ertoe doet

Artsen en patiënten die AI gebruiken, kunnen worden misleid door advies dat actueel lijkt, maar nog op oude richtlijnen is gebaseerd. Het onderzoek laat zien dat AI-ontwikkelaars betere manieren moeten vinden om ervoor te zorgen dat modellen updates niet alleen herkennen, maar ook correct toepassen.

## Bronnen en referenties

1. [Large language models show systematic failures in incorporating evolving medical knowledge](https://arxiv.org/abs/2610.30631) – arXiv, 2026-10-23

Laatst bijgewerkt: 2026-10-23