Geminiの発表内容

Googleは2026年10月1日、Android版のGemini Liveに視覚支援機能「Guided Vision」の提供を始めました。スマートフォンのカメラを共有すると、周囲の様子をリアルタイムに音声で説明します。

カメラの位置がずれているときは、右に向ける、下へ傾ける、離れるといった指示を音声で返します。食品の成分表示や家電の文字読み取り、床に落ちた物の捜索、服の色や柄の確認に対応します。視覚障害者支援のAiraと連携し、1,000人以上のテスターによる検証を経て作られました。

日本語を含む複数の言語に対応しており、Geminiアプリの設定やAndroidのショートカットから呼び出せます。ただし医療機器や白杖(視覚障害者が使う杖)の代わりにはならず、移動時の安全誘導や障害物の検知を目的とした機能ではありません。

薄暗い飲食店で紙のメニューを読んだり、家電の表示や小さな文字を確認したりする作業を音声で補助できます。不慣れな部屋の配置を把握したいときや、床に落とした小物を探す際の手間も減らせます。

つまり、どういうこと?

ざっくり言うと、スマートフォンのカメラを通して、目の前にあるものを口頭で教えてくれる案内役がGeminiについた形です。たとえるなら、カメラの向きがズレたときに「もう少し右を映して」と指示を出しながら、文字や周囲の状況を読み上げてくれるアシスタントです。

編集部の見方

AIがカメラの構え方を言葉で指示する発想に、筆者はなるほどと膝を打ちました。

これまでの画像認識は、写っているものをただ答える一方通行の機能が大半でした。しかし本機能では、ピントや画角が外れているとGemini側から「右に動かして」「少し離れて」と指示を出します。1,000人以上の当事者と検証を重ねただけあって、視界が見えにくい人の困りごとをかなり具体的に捉えている印象です。

対話型で誘導する発想。ただ、白杖の代わりにはならず移動時の障害物検知には使えないと明記されているため、屋外の歩行支援としてはまだ過信できません。今後は、2026年秋以降のPixel新製品やスマートグラスなどのウェアラブル端末へどう展開されていくかを見届けたいところです。

誰に関係するか

薄暗い場所で書類やメニューの小さな文字を読んでいる人は、Geminiにカメラを向けて音声で内容を聞き取れるようになります。