Google、Gemini Liveに視覚支援機能「シンプルガイド」

Googleは、GeminiアプリのGemini Liveに、音声で視覚情報を説明する「シンプルガイド」を順次提供しています。利用者がカメラ映像やスマートフォンの画面を共有すると、Geminiが周囲の状況や画面の内容を説明し、質問にも会話形式で答えます。

手元の書類や説明書、リモコンにカメラを向ければ、文字を読み上げたり、必要な部分をまとめて伝えたりできます。スマートフォン画面の共有にも対応し、操作に迷ったときには、次に何をすればよいかを音声で案内します。カメラの位置が合わない場合に、近づけるよう促す例も挙げられています。

使い始めるには

利用にはGeminiモバイルアプリのプロフィール設定で「Liveでシンプルガイドを使用する」をオンにします。対応するAndroid端末では、ボタンの長押しで起動できます。Androidのユーザー補助設定から、画面上のボタン、2本指のスワイプ、または音量キー2つを使う起動方法も設定できます。

Googleはあわせて、介護現場の担当者向けに、業務でGeminiを使うためのノウハウやプロンプトをまとめたガイドを公開しました。シンプルガイドの対応端末の詳しい一覧や、提供完了の時期は、記事の説明では示されていません。