Google a commencé à déployer une fonctionnalité appelée Guided Vision dans son application Gemini Live. Elle fonctionne sur les téléphones Android compatibles et s’appuie sur l’IA pour décrire à voix haute ce que voit la caméra. Il suffit de pointer le téléphone vers une étiquette, un panneau ou un objet pour en entendre la description, y compris le texte en petits caractères. On peut aussi poser des questions complémentaires, par exemple sur la date de péremption d’un produit alimentaire.
Comment l’utiliser
Guided Vision est accessible depuis l’application Gemini, via Google TalkBack ou à l’aide d’un raccourci d’accessibilité configurable dans les paramètres Android, sur les appareils équipés d’Android 9 ou d’une version ultérieure. Une fois la fonctionnalité activée, l’IA donne des indications audio pour aider à cadrer la caméra, puis lit le texte ou décrit la scène.
Pourquoi c'est important
Pour les personnes aveugles ou malvoyantes, Guided Vision permet de lire des étiquettes, des panneaux ou des informations sur des produits directement avec leur téléphone, sans avoir besoin d’un scanner dédié. La fonctionnalité pourrait accélérer des tâches du quotidien, comme vérifier une date de péremption, mais il faut toujours recourir à d’autres outils pour se déplacer en toute sécurité.