Oossa

Multimodale training geeft tekstmodellen verborgen visueel redeneervermogen

Onderzoekers laten zien dat training met beeld en tekst verandert hoe taalmodellen ruimtelijke taken oplossen, zelfs wanneer ze alleen tekst krijgen.

Kort berichtDoor Gepubliceerd door Oossa: 1 min lezen

Datum van gebeurtenis:

Een team onder leiding van Qi Zhang publiceerde op 11 nov 2026 een paper waaruit blijkt dat taalmodellen die zijn getraind met afbeeldingen en tekst een verborgen ‘visuele as’ ontwikkelen, die ze gebruiken wanneer ze uitsluitend met tekst redeneren. In het model Chameleon‑7B met 7 miljard parameters daalde de nauwkeurigheid op de navigatietaak van BIG‑Bench Hard met 27,6 procentpunt toen deze as werd uitgeschakeld, terwijl de prestaties op symbolische booleaanse tests licht verbeterden. Het effect treedt op in specifieke lagen en helpt ook bij taken rond mentale rotatie en perspectief nemen.

Waarom het ertoe doet

Dit laat zien dat training met beeld en tekst het ruimtelijk redeneervermogen van AI die alleen tekst verwerkt kan versterken, en kan richting geven aan het ontwerp van toekomstige modellen.

Was dit artikel nuttig?
Delen

Lees ook

Oossa · Nieuwsbrief

De AI-week, uitgelegd

Elke maandag: het nieuws dat ertoe doet, in gewone taal. Gratis, geen spam.