ScribeMe、Meta AIグラスで視覚障害者を支援|AIが周囲をリアルタイムで音声説明

[最終更新]

Googleで優先するソースとして追加するボタン

AIが視覚情報を説明できるだけでは、日常の支援として十分とは限りません。ScribeMeがスマートグラスとの連携で目指すのは、スマートフォンを構える操作そのものを減らすことです。視覚支援AIは「認識する技術」から、行動中に自然に情報を届ける存在へ変わり始めています。


2026年8月18日、エジプトの20歳の学生・起業家Mark Morad氏が開発した視覚障害者向けAIアプリ「ScribeMe」が、世界140カ国の数千人に利用されている。iPhone、Android、Metaのスマートグラスに対応し、カメラ越しの周囲の物体や距離、状況を音声で伝え、リアルタイムの質問にも回答する。

Reutersによると20言語に対応し、基本利用は無料、追加機能は月額20ドルまたは年額200ドルで提供されている。開発者自身も視覚障害があり、既存のスクリーンリーダーでは図表や数式を十分に扱えなかった経験から開発を始めた。

From: 文献リンクBlind Egyptian entrepreneur’s AI app helps others see the world

【編集部解説】

「画像を説明するAI」から「周囲を継続して伝えるAI」へ

視覚障害者を支援するAIアプリ自体は、ScribeMeが初めてではありません。Microsoftの「Seeing AI」はスマートフォンのカメラを使って文章や物体、写真などを認識して音声で伝える機能を提供しており、Googleの「Lookout」もAndroid端末を通じて周囲の情報を取得できる視覚支援アプリとして提供されています。

その中でScribeMeが現在強く打ち出しているのが、「Live Assist」とMetaのAIグラスの組み合わせです。2026年3月にベータ版として対応し、スマートフォンを手に持つ代わりに、グラスのカメラと音声操作だけで周囲の説明を継続して受けられるようになりました。ScribeMeの公式情報では、カメラに映る環境の変化に合わせて情報を提供し、座席やドアを探す、メニューを読む、商品を識別するといった場面を支援すると説明されています。

ここに、今回のニュースで重要な変化があります。スマートフォン型の視覚支援では、利用者が端末を取り出し、カメラを対象物へ向ける操作が基本になります。一方、眼鏡型デバイスなら利用者が見ている方向とカメラの方向を近づけやすく、両手を使わずに周囲の情報をAIへ渡せます。ScribeMeは、AIの認識精度だけではなく、「どうやってAIに現実世界を見せるか」というインターフェースを変えようとしているサービスだと捉えられます。これは公式仕様から読み取れる編集部の解釈です。

白杖と競合するのではなく、情報を追加する

重要なのは、こうしたAIが白杖や盲導犬そのものを置き換える技術とは限らないことです。

MicrosoftもSeeing AIの初期研究段階から、AIによる視覚情報の提供は白杖や盲導犬に代わるものではなく、それらに追加の情報を与える役割として位置付けていました。

ScribeMeについても同様に考えると分かりやすいでしょう。たとえば白杖は足元の段差や障害物を触覚的に把握する手段になりますが、店の名前、商品のラベル、遠くにいる人物、メニューの内容といった情報まですべて伝えるものではありません。ScribeMeはこの「視覚情報として存在するが、従来の移動補助だけでは取得しにくい情報」をAIで音声化する方向に機能を広げています。公式サイトでは、物を探す、手書き文字を読む、周囲を理解するといった用途がLive Assistの例として挙げられています。

元記事でKaren Morad氏がケニア旅行中にスマートグラスを使い、周囲の動物や距離、動きを説明してもらったという例は、この違いをよく表しています。AIが「安全に歩くためのセンサー」だけではなく、「その場所で何が起きているのかを知るための情報レイヤー」として使われているからです。

文書アクセシビリティから現実世界までを一つのアプリにまとめる

ScribeMeはスマートグラス専用アプリではありません。もともとの中心機能には、PDFやPowerPointの読み取り、画像説明、OCRなどがあります。現在のGoogle Play版では、PDFやPowerPointから見出し、リスト、表を識別し、画像に代替テキストを付けるSmart Scan、写真について説明を受けて追加質問できるSnap nScribe、カメラをリアルタイムで利用するLive Assistが一つのアプリにまとめられています。

つまり設計の対象は「外出時の視覚補助」だけではありません。大学の教材を読む、写真を理解する、Web上の情報を確認する、そして実際の空間を把握するところまでを同じAIアシスタントで扱おうとしています。

App Store版では、スマートフォンの画面共有にも対応し、Webサイトや写真、アプリ、SNSなどの画面についてリアルタイムで支援を受けられると説明されています。

この構成からは、ScribeMeが「特定の物を認識するための単機能ツール」ではなく、デジタル空間と物理空間の双方で視覚情報を言語へ変換することを目指している設計思想が読み取れます。

日本からも利用できるが、確認しておきたい点もある

ScribeMeは日本のApp Storeにも掲載されています。現行App Storeの言語一覧では日本語を含み、iOS 15.5以降に対応しています。

一方、AIによる視覚支援では「使える」ことと「常に正しい」ことを分けて考える必要があります。安全に関わる用途では、AIの出力だけに依存しない慎重さが必要です。ScribeMeの公式サイトやアプリ配布ページでは、あらゆる場面で認識結果を保証する旨は確認できません。

また、スマートグラスを使ったLive Assistには、対応するMeta製AIグラスという追加ハードウェアが必要です。スマートフォンだけで使える既存の視覚支援アプリと比べると、ハンズフリーという利点の一方で、端末価格やバッテリーなど、スマートフォン単体にはないハードウェア上の条件も加わります。Metaグラス連携についてScribeMe側は機能提供を明記していますが、すべての機種・地域・利用条件で一律に利用できるかは、導入前に確認する必要があります。

ScribeMeが示しているのは、AIアクセシビリティの次の段階が、単純に画像認識モデルを高性能化することだけではないということです。カメラを手に持つ必要を減らし、必要な情報を利用者の行動中に自然に届けられるか。スマートグラスとの統合は、そのインターフェース上の課題に対する一つの回答と言えそうです。

【関連記事】

Ray-Ban Meta、視覚障害退役軍人13万人に無償配布|MetaのAI視覚機能は補助器具になれるか
MetaのAIスマートグラスを視覚障害のある米国退役軍人へ大規模提供する取り組みを扱った記事。AIによる物体認識やテキスト読み上げの可能性に加え、誤認識や安全性、インターネット接続への依存など、AIを視覚補助に使う場合の課題まで検討している。

Ray-Ban Metaグラス、Be My Eyes連携で視覚障害者向け機能を大幅強化
Ray-Ban Metaグラスから視覚障害者支援サービス「Be My Eyes」のボランティアへハンズフリーで接続する機能を紹介した記事。ScribeMeがAIによって周囲を説明するのに対し、こちらはスマートグラスと人間の支援ネットワークを接続するアプローチという違いがある。

Apple Vision Proで視線が車いすを動かす|AIが人と世界の接点を再設計する
Appleが発表したAIアクセシビリティ機能や、Apple Vision Proの視線追跡を使った電動車いす操作を扱った記事。ScribeMeとは支援する身体機能が異なるものの、一般向けコンピューティングデバイスが支援技術のインターフェースとして利用され始めているという点で共通する。

【編集部後記】

テクノロジーの価値は、性能の高さだけではなく、それによって誰かの日常がどれだけ過ごしやすくなるかにも表れるのだと思います。視覚障害というハンデがあっても、AIやスマートグラスのようなプロダクトによって、得られる情報や行動の選択肢が増えていくのはとても意義深いことです。特にScribeMeのように、当事者自身の不便から生まれた技術が、同じ課題を抱える人たちの生活を支えている点には強く惹かれます。AIは時に効率化や自動化の文脈で語られがちですが、こうした事例を見ると、人の可能性を補い、QOLを高めるための技術でもあることを改めて感じます。

新しいテクノロジーが、これまで存在していた不便や制約を少しずつ小さくしていく。その積み重ねこそが、技術が社会にもたらす大きな価値の一つなのではないでしょうか。


【用語解説】

ScribeMe
視覚障害者向けに開発されたAI視覚支援アプリ。カメラを通したリアルタイムの周辺説明、画像認識、文書の読み取りなどを一つのアプリで提供する。iPhoneとAndroidに対応するほか、Live AssistではMetaのAIグラスとの連携にも対応している。

Live Assist
ScribeMeのリアルタイムAIビデオ支援機能。カメラが捉えた映像をAIが解析し、物を探す、文字を読む、周囲の状況を把握するといった行動を音声で支援する。

スクリーンリーダー
コンピューターやスマートフォンの画面上に表示された文字や操作要素を音声または点字として出力する支援技術。視覚障害者がデジタル機器を利用するための代表的なアクセシビリティ機能。

OCR(光学文字認識)
画像やスキャンデータに含まれる文字をコンピューターで扱えるテキストデータへ変換する技術。ScribeMeでは文書や画像内の文字を読み取り、音声による利用などにつなげている。

AIスマートグラス
カメラ、マイク、スピーカーなどを眼鏡型デバイスに搭載し、AIによる音声応答や周辺認識を利用できるウェアラブル機器。視覚障害者向けでは、スマートフォンを手に持たずにカメラを利用できる点がアクセシビリティ上の特徴となる。

【参考リンク】

ScribeMe 公式サイト(外部)
ScribeMeのLive Assist、Smart Scan、Snap nScribeなど主要機能を紹介する公式サイト。アプリの基本的な用途やダウンロード先を確認できる。

ScribeMe|App Store(外部)
iPhone・iPad版ScribeMeの公式配布ページ。対応OS、対応言語、アクセシビリティ機能、アプリ内課金、更新内容などを確認できる。

ScribeMe|Google Play(外部)
Android版ScribeMeの公式配布ページ。Live AssistやSnap nScribeなどの機能概要、更新状況、インストール情報を確認できる。

Meta AIグラス 視覚障害者・弱視者向けアクセシビリティページ(外部)
Meta AIグラスを視覚障害者・弱視者が利用する際の機能や利用方法を案内するMeta公式ページ。

Seeing AI(外部)
Microsoftが提供する視覚障害者向けAI視覚支援サービスの公式サイト。ScribeMeと同様に、カメラを通して視覚情報を音声化する既存サービスの一つ。

【参考記事】

ScribeMe – See the World Using AI|ScribeMe(外部)
ScribeMeのLive Assistを中心に、物体探索、手書き文字の読み取り、周辺環境の理解、文書アクセシビリティなど現在提供している機能を確認できる公式情報。

ScribeMe App|Apple App Store(外部)
Live Assistや文書処理、OCR、対応言語、iOS要件などを掲載する配布ページ。現在の機能構成やアップデート状況を確認する資料として使用。

ScribeMe|Google Play(外部)
Android版の機能説明と提供状況を掲載。リアルタイムAIビデオ支援や画像への追加質問など、ScribeMeの利用方法を確認する資料として使用。

Seeing AI – A Visual Assistant for the Blind|Microsoft(外部)
AIによって視覚情報を説明するMicrosoftの支援サービス。ScribeMe以前から存在するAI視覚支援との比較材料として参照。

AIグラスが目の不自由な方や視力の弱い方を支援|Meta(外部)
Meta AIグラスをアクセシビリティ用途で利用する仕組みを説明する公式ページ。ハンズフリー型の視覚支援が実際にどのように展開されているかを確認する資料。

Googleで優先するソースとして追加するボタン
投稿者アバター
乗杉 海
SF小説やゲームカルチャーをきっかけに、エンターテインメントとテクノロジーが交わる領域を探究しているライターです。 SF作品が描く未来社会や、ビデオゲームが生み出すメタフィクション的な世界観に刺激を受けてきました。現在は、AI生成コンテンツやVR/AR、インタラクティブメディアの進化といったテーマを幅広く取り上げています。 デジタルエンターテインメントの未来が、人の認知や感情にどのように働きかけるのかを分析しながら、テクノロジーが切り開く新しい可能性を追いかけています。

関連記事