# GazeAct utilise le regard humain pour entraîner des robots

> Un jeu de données associe des démonstrations de robots au suivi synchronisé du regard humain. Selon ses auteurs, guider l’entraînement par le regard améliore la réussite des tâches, sans que les robots aient besoin de ces données pour fonctionner.

Oossa · 2026-10-20 · https://oossa.com/fr/gazeact-uses-human-eye-tracking-to-train-robot-policies

Des chercheurs ont présenté GazeAct, un jeu de données recueillies sur de vrais robots et une méthode d’entraînement qui associent 12,000 démonstrations réparties sur 40 tâches au suivi du regard humain, enregistré à 300 Hz. Ces données aident à entraîner des politiques vision-langage-action afin qu’elles se concentrent sur les objets et les emplacements pertinents. Selon les auteurs, les robots n’ont pas besoin de données sur le regard lorsqu’ils sont en fonctionnement.

Sur 18 tâches réalisées dans le monde réel, les auteurs font état d’une hausse du taux de réussite moyen, de 48.1% à 58.6%, avec des gains pouvant atteindre 25 points de pourcentage. Ils rapportent également une progression sur le benchmark LIBERO-Spatial, de 57.9% à 69.6%.

## Les faits

- 12,000 démonstrations réparties sur 40 tâches et cinq domaines, avec un suivi du regard synchronisé à 300 Hz.
- Taux de réussite moyen déclaré sur 18 tâches du monde réel : de 48.1% à 58.6%.

## Pourquoi c'est important

Pour les chercheurs en robotique, GazeAct permet d’utiliser les mouvements oculaires des opérateurs comme guide d’entraînement sans avoir besoin de capteurs de suivi du regard une fois les robots déployés. Il reste à déterminer si ces gains se confirment au-delà des tests rapportés.

## Sources et références

1. [GazeAct: A Human-Gaze-Annotated Manipulation Dataset for Attention-Regularized Policies](https://arxiv.org/abs/2610.24507) – arXiv cs.RO, 2026-10-20

Dernière mise à jour: 2026-10-20