見出し画像

米国、レイバンとメタが開発したAIめがねが視覚障害者にもたらす可能性

視覚障害者には、「写っている物体の名前や文字列を読み上げてくれるくらいではあまり役に立たない」と書いてきた。
ところが、FaceBook のメタとサングラスのレイバンがコラボして開発した「AI めがね」では、自然語で対話を繰り返すことにより、知りたいことを絞り込んで詳しく説明させることができる。生成 AI の進化は私の予想を超えて速い。

【メタの AI めがね、第1世代】
これは従前のヘッドマウントディスプレーとは異なり、表示機能をもたない。レンズ部分を通して前景がそのまま見える。
だが、1台のカメラ、2個のスピーカー、5個のマイク、さらに通信処理回路を有する。
めがねはユーザのもつスマホと Bluetooth で通信する。

このようなメガネが2023年秋にリリースされ、晴眼者の間で「臨場感ある録画・録音ができる」とか「ハンズフリーで料理をしている様子が録画できる、と好評をを得た。

<巻末参考リンク1>

だが、視覚障害者にとってとりわけ重要なのは、2024年夏に追加された 「生成 AI と会話を繰り返すことにより前方画像について、自然語で教えてもらえる」という追加機能である。


RAY-BAN Meta Wayfarer


【メタの AI めがね、第2世代】
2024年夏に追加された第2世代の「対話型のAIによる画像識別機能」 はこんな感じで動作します。
ボタンを押してから Hey Meta と呼びかけ、つづいて次のような質問をつづける。

前にバス停は見えるかい?
バス停までの虚位は?
バス停には人が待っている?
何人くらい待っている?

これは、カメラの画像が米国のメタの AI サーバーに送られ、その AI エンジンが解析・対応しているわけだ。無料で使えます。

さらには、以下の米国での動画でよくわかります。にわかにAIがしゃべっているとは信じられないくらい自然です。

<巻末参考リンク2>
<巻末参考リンク3>

いずれも視覚障害者を対象とした動画としては例外的に多い再生回数です。関心の高さが分かります。

【日本での発売はまだ先】
このスマートグラスが使えるのは下記の国々だけだ。

United States, Canada, Italy, United Kingdom, Ireland, Australia, Spain, Belgium, France, Austria, Germany, Sweden, Norway, Denmark.

推測になるが、使える国が限られている理由としては、言語の問題のほかに、たとえば、

① その国に特有の文字や物体を学習しなければならない。
  たとえば、マツタケとシイタケの識別とか。
② その国固有の法律に合致しなければならない。

いずれも、なかなか面倒そうです。でも、待ち遠しいですね。

【国内販売を待たずに試すには】
米国・レイバンの販売サイトでは、国外発送をしていない。米国・アマゾンにもない。

だが、楽天市場に並行輸入品が出ている。販売元は輸入代理店であり、サポートは得られないと思われるが、どうしても欲しいときには頼れる。

それなりに高価(6万円ほど)なので筆者は買う予定がないが、入手したあとは以下の問題が想定される。

① Meta View というアプリのダウンロードやユーザ登録が日本から可能かどうか。
② 米国のAIサーバーに接続できるか。

以上については、日本からのインターネット接続であることを伏せるため、米国の VPN サーバに接続することで回避できる。これは、別に非業法なことではない。
なお、すべてのやりとりや操作は英語になる。

下記は、サービス対象外の南アフリカから VPN を使って試した実録です。

<巻末参考リンク4>

【まとめ】
読者の中には、各種の生成 AI を日常的に使っている方も多いであろう。
テキストでのプロンプトを繰り返すにしたがって奥深い情報が得られる流れは驚くばかりだ。

それと同様のことが、画像を対象にできるようになったのです。それは、視覚障害者にとって、大きな可能性を意味します。
早く日本でも販売してほしい。もたもたしていると、Google から似たようなものが出て来るかも。


<参考外部リンク1>
【ミニレビュー】スマートサングラス「Ray-Ban Meta」をラスベガスで試す

<参考外部リンク2>
Demonstrating what can the Meta Glasses do for people who are blind and visually impaired!

<参考外部リンク3>
Meta Ray-Ban Smart Glasses Review: Are They Worth It for the Visually Impaired?

<参考外部リンク4>
Follow up review and feedback on questions for the Ray-ban meta Smart glasses


<参考外部リンク5>
Meta smart glasses large language models and the future for assistive glasses for individuals with vision impairments

<参考外部リンク6>
Ray-ban | Meta Wayfarer Sunglasses




いいなと思ったら応援しよう!