Une équipe dirigée par Qi Zhang a publié le 11 nov. 2026 une étude montrant que les modèles de langage entraînés sur des images et du texte développent un « axe visuel » latent, qu’ils mobilisent pour raisonner à partir de texte seul. Dans le modèle Chameleon‑7B, qui compte 7 milliards de paramètres, désactiver cet axe a fait baisser de 27,6 points de pourcentage la précision à la tâche de navigation BIG‑Bench Hard, tout en améliorant légèrement les résultats aux tests symboliques de logique booléenne. Cet effet apparaît dans certaines couches et aide aussi à accomplir des tâches de rotation mentale et de prise de perspective.
Pourquoi c'est important
Ces résultats montrent que l’entraînement sur des données associant images et texte peut améliorer le raisonnement spatial des IA qui ne traitent que du texte, et ainsi orienter la conception des futurs modèles.