NAW / PRODUCTS 03
IMAGE: AI生成ビジュアル
PRODUCTS / Google Gemini
Google、Gemini Liveに「Guided Vision」を提供開始 — カメラ映像を音声でリアルタイム解説
対応Android端末のGemini Liveで、カメラ共有中の周囲の様子を会話形式で説明し、画角の合わせ直しも音声で案内するアクセシビリティ機能が利用可能に。視覚障害・弱視コミュニティと共同開発し、Airaとの連携で数万時間のデータを活用した。
Googleは2026年10月1日(米国時間)、Gemini Liveにアクセシビリティ機能「Guided Vision」の提供を開始したと発表した。対応するAndroid端末で利用でき、カメラを共有しながら周囲の様子を音声で把握できる。目の見えない人や見えにくい人、直感的な視覚支援を求める人を想定した、声中心のリアルタイムな視覚解釈機能と説明されている。以下はGoogle公式ブログの記載範囲の整理である。
できること — カメラ共有中の会話形式の視覚支援
- リアルタイムの音声説明: Gemini Liveのセッション中にカメラを共有すると、周囲の様子を分かりやすく説明してくれる。細かい文字の読み取りなど日常の作業の助けになるという。
- 追加質問: 見ているものについて詳しい追加質問ができ、会話の相手のように応答するとしている。
- 画角の合わせ直し案内: カメラが高すぎる・近すぎる・少しずれている場合、「ゆっくり右に動かす」「下に向ける」「下がってみる」といった自然な言葉の指示で、必要な構図への合わせ直しを促す。
- 公式動画: Google公式ブログにはGuided Visionの紹介動画が掲載されている。細部の動作は一次資料を参照されたい。
開発の経緯 — アクセシビリティコミュニティとの共同開発
- 共同開発: 視覚障害・弱視コミュニティとの緊密な連携で開発されたとしている。9月のAndroidの新機能紹介で先行公開されていたものが今回正式提供となった。
- Airaとの連携: 実世界の会話文脈に対応させる訓練のため、アクセシビリティサービスのAiraと提携し、合計で数万時間規模の視覚解釈データを活用した。
- 検証体制: AiraのTrusted Testerネットワークの1,000人超が日常の利用場面で負荷検証と改善に協力し、Airaの専門家が対象分野の専門家として安全ガードレールの策定と評価に直接関わったとしている。
- 注意: 料金・対応機種の詳細や性能数値は公式ブログに記載がないため、本記事では扱わない。
利用条件 — Android 9以降と有効化の方法
- 対象: Android 9以降の端末で、Gemini Liveに対応する地域と言語が対象。
- 開始方法: Gemini Liveでカメラを共有して使う。GeminiアプリとAndroidのシステムソフトを最新版に更新しておくこととしている。
- 有効化の入口: Geminiモバイルアプリのプロフィール設定で「Use Guided Vision in Live」をオンにする方法のほか、AndroidのアクセシビリティのショートカットやTalkBack経由でも利用できるとしている。
- 詳細資料: 具体的な操作手順や対応条件はGoogleのサポート資料を参照されたい。