AI-NATIVEシリーズ|ウェアラブルAI|The Wearable Ladder 第2回(全3回)
AIグラスの公式仕様から見る:11自分の18ノートPC作業はハンズフリーでできるか
この企画の狙い自分がノートPCで普段やることをリストアップし、18共同創業者からのメッセージを読む、カレンダーを確認する、コーディングエージェントに指示を出す——そうした作業を一つずつ、Meta公式ドキュメントがRay-Ban Metaグラスでできると明記しているか調べた。11ハンズフリーで可能とされているもの、4 は「非対応」とされ、3 ドキュメントに記載がない。
なぜこれが重要か。 「できる」と「できない」の境界には理由がある。メッセージ、通話、カレンダーは「できる」側だが、自分の本業が動くアプリ——WeChat、Feishu、GitHub、コーディングエージェント——は「できない」側に並ぶ。 今のメガネは生活の雑務ならこなせるが、仕事はまだ無理だ。その理由はハードウェアではなく、プラットフォーム側の都合である。
このあと自分でできること。 自分のノートPC作業を同じ手順で10分で仕分けてみるといい。購入前でも開発前でも構わない。そして、ドキュメントは「主張」であって「実測」ではないので、同じ18 タスクを「ロードトリップ当日」に事前登録し、実際に試す——結果は日付付きでこのページに追記する。
The Wearable Ladder — シリーズの背骨
- 終焉の一覧──なぜ頭部装着型コンピュータは消えていったのか 第1話
- AIグラスの公式仕様から見る:11自分の18ノートPC作業はハンズフリーでできるか この回
- AIグラスがデスクを本当に置き換える「5つの条件」と、その成立日 第3話
この回が答える問いは一つ自分のノートPC作業のうち、AIメガネで本当にハンズフリーでできるのはどれで、どこで詰まるのか?
この回は扱わない。なぜ過去のヘッドマウント型コンピュータが消えたのか——それはエピソード1「死の表」——あるいは、メガネがデスクトップを置き換えるために何が必要か——それはエピソード3「予測台帳」.
このAIメガネ回の範囲と、誰のためのものか
これはThe Wearable Ladderの第2話だ。エピソード1は過去の23ヘッドマウント型コンピュータの失敗を振り返り、エピソード3は日付付き予測で未来を見据える。今回は「現在進行形」。本来はロードトリップ当日——全タスクをハンズフリーで試し、すべて記録——で答えるつもりだったが、その日はまだ来ていないし、作り話でごまかすつもりもない。 だから今回はもう一つの誠実な情報源、すなわちドキュメントを一つずつ検証し、すべてにリンクを付けて答える。 その後、実地でドキュメントが正しいかを検証する。
これは、メガネ向けに何を作るか決めたいエンジニア、チームに導入すべきか悩む創業者、そして買ったはいいが実際何ができるのか気になるすべての人に向けて書いている。
イメージ:ルールの下でのスパーリング
スパーリングにバーベルは持ち込めない。その場でできることは、今身につけているものだけ——しかもルールの範囲内で、ハイライト映像ではない。登っている最中も運転中も、唯一身につけているコンピュータがこのメガネであり、ドキュメントこそがルールブックだ。
| 本番のラウンド | グラスをかけている状態 |
|---|---|
| ゴングが鳴った瞬間、身につけているもの | どんな体勢でも必ず使える入出力:マイク、スピーカー、カメラ |
| ジャブ | 短い音声リクエスト——素早く、帯域も小さい。仕事を完了させるのではなく、段取りをつけるための一撃だ。 |
| ハイライトではなく、ルールブック | Metaが「グラスでできる」と公式に書いていること——デモ映像の派手さではなく、ルールとして明記された範囲。 |
| ルールで禁じられている動き | ドキュメントで「非対応」とされているタスク |
| ラウンドの合間のコーナー | 実際の処理が走る場所——スマホとクラウド |
| 自分の作戦が本当に通用するかを試す勝負 | ドキュメントの正しさを現場で検証するロードトリップ当日(リアルタイム記録) |
ルールブック:ドキュメントが定める範囲
どのタスクを判定するにも、まず前提を押さえる。グラスはスマホの単なる鏡ではなく、選別された橋渡し役だ。
| できること | ドキュメントの記載内容 | |
|---|---|---|
| メッセージを音声で読み上げる | WhatsApp、Messenger、Instagram、そしてスマホ本体のメッセージ——クローズドリスト | 出典 |
| 音声で返信 | 同じリストに対応。グラスが返信内容を読み上げ、ユーザーが「はい」「いいえ」「キャンセル」で答える。 | 出典 |
| Telegram、Slack、Signal、WeChat、Feishu | Telegram、Slack、SignalはいずれもMeta公式ページで一切名前が出てこない。WeChatとFeishuもクローズドリスト外で、対応していない(訳:Telegram, Slack and Signal are never named on any Meta page; WeChat and Feishu are not on the closed list — not supported) | source |
| ボイスノート | 最長60秒。3秒間無音になると自動で録音が止まる(訳:Up to 60 seconds; recording stops after 3 seconds of silence) | source |
| カレンダー | GoogleカレンダーとOutlook:音声で予定の確認や作成ができる(英語・米国)(訳:Google Calendar and Outlook: ask and create events by voice (English, US)) | source |
| メール | 読み上げのみ対応。返信は公式ページに記載がない(訳:Read aloud only; no official page documents replying) | source |
| リマインダー | 音声で設定・検索できる。スマートフォンが必要。対応は米国・カナダ・オーストラリアの英語(訳:Set and search by voice; needs the phone; English in US, Canada, Australia) | source |
| オフライン | 写真・動画・バッテリー残量・スマートフォンの音声は使えるが、アシスタントはネット接続が必須(訳:Photos, video, battery level and audio from the phone; the assistant needs a connection) | source |
| サードパーティ製アプリ | Toolkit 1.0は2026年9月24日にリリースされたが、新機能はまだ一般公開できない(訳:Toolkit 1.0 shipped 24 September 2026; its new features cannot be published yet) | source |
Meta Connect 2026(9月23〜24日)で開発者向けツールキットがバージョン1.0に到達。バッテリー残量取得や音声でアプリを起動する機能が加わったが、これらはすべて「実験的」扱いで、使ったアプリは「まだ公開できない」と明記されている(訳:Meta Connect 2026 (23–24 September) changed the developer side: the toolkit for building glasses apps reached version 1.0, with a battery reading and a way to launch your app by voice. But every one of those new features is marked experimental, and apps that use them "cannot be published yet") (toolkit changelog)。音声でアプリは開けるが、リクエスト内容を渡すことはできない(訳:Voice launch opens an app; it can't pass it your request.)
自分が普段行う18ラップトップ作業を、公式ドキュメントで一つずつ判定
11公式対応 · 4非対応 · 3記載なしの中から、 18実際に自分がやっている作業を9月25日にリストアップし、ドキュメントは9月19日と25日に確認した。
「非対応」列は、リストにあるすべての仕事用ツール。「公式対応」列はメッセージ、通話、カレンダー、リマインダー、写真、質問が該当する。
| タスク | ドキュメントでの扱い | 詰まるポイント | 詳細 | |
|---|---|---|---|---|
| 共同創業者から届いた最新メッセージを聞く | ✅ 公式対応 | — | WhatsApp、Messenger、Instagram、電話のメッセージを自動アナウンス+読み上げ | 出典 |
| その共同創業者に音声で返信する | ✅ 公式対応 | — | 「Hey Meta, reply」— 返信内容が読み上げられ、確認する;WhatsApp/Messenger/Instagram | 出典 |
| WeChatの最新メッセージを聞く | ❌ 非対応 | プロバイダー | WeChatは対応プロバイダーに含まれていない。リストはMessenger、WhatsApp、Instagram、電話で固定されている。 | 出典 |
| チームにFeishu/Larkで一行メッセージを送る | ❌ 非対応 | プロバイダー | Feishu/Larkも対応プロバイダーに入っていない。 | 出典 |
| 今日のカレンダー予定を調べる | ✅ 公式対応 | — | GoogleカレンダーとOutlook:「今日の予定は?」(英語・米国) | 出典 |
| カレンダーに会議を追加する | ✅ 公式対応 | — | 音声でイベント作成(英語・米国) | 出典 |
| 受信トレイの最新メールを聞く | ✅ 公式対応 | — | “Hey Meta, read my emails aloud” — 読み上げのみ(release notes v25, 2026-05-14; US/CA)(訳:「Hey Meta, 私のメールを音読して」— 読み上げのみ(リリースノートv25, 2026-05-14; 米国/カナダ)) | 出典 |
| そのメールに返信する | ❔ 記載なし | プラットフォーム | 公式ページにメール作成や返信の記載はない。 | 出典 |
| 今夜デスクで思い出せるようにアイデアを記録する | ✅ 公式対応 | — | 「Remember this…」でリマインダーに保存、音声で検索できる(英語・米国/カナダ/オーストラリア) | 出典 |
| 明日の特定の時間にリマインダーをセットする | ✅ 公式対応 | — | 「Set a reminder for…」— プッシュ通知にはスマホが必要 | 出典 |
| 普段検索するような事実系の質問に答える | ✅ 公式対応 | — | Meta AIが回答。ただしネット接続必須。オフライン時はアシスタント自体が使えない | 出典 |
| 看板や他言語の文章を翻訳する | ✅ 公式対応 | — | 音声のライブ翻訳(オフライン6言語、オンラインでさらに14言語)。看板の読み取りはLive AIで個別に記載なし | 出典 |
| 写真を撮って指定した相手に送る | ✅ 公式対応 | — | 「Send a picture to [contact] on WhatsApp/Messenger/Instagram/my phone」— 送信前プレビューは不可 | 出典 |
| GitHubのPRのCIがグリーンか確認する | ❌ 非対応 | リレー | 現時点でメガネにGitHub連携はない。MetaのMuse agent(GitHub含む1,500以上のコネクタ対応)は「AI glassesに近日対応予定」だが、日付は未定(訳:No GitHub integration on the glasses today; Meta's Muse agent (GitHub among 1,500+ connectors) is 'coming soon to AI glasses', no date) | 出典 |
| コーディングエージェントに仕事を頼み、その結果を聞く | ❌ 非対応 | プラットフォーム | 音声で呼び出せるのはアプリの起動だけ(実験的・公開不可)。Meta AI Connectorsは早期アクセス登録のみ(訳:Voice invocation only launches an app (experimental, unpublishable); Meta AI Connectors are early-access sign-up only) | 出典 |
| 目的地まで徒歩で行くルートを調べる | ❔ 未記載 | 出力 | 徒歩・自転車・公共交通のナビはMeta Ray-Ban Display(US/CA)でのみ記載。Ray-Ban Meta Gen 2については触れられていない(訳:Walking, cycling and transit navigation are documented for Meta Ray-Ban Display (US/CA); not documented for Ray-Ban Meta Gen 2) | 出典 |
| 自分のポートフォリオ記事を聴く | ❔ 未記載 | リレー | ウェブページの読み上げについてはドキュメントに何も書かれていない。おそらくスマホ側でやることになる(訳:The documentation is silent on reading a web page aloud; the phone would likely have to do it) | 出典 |
| 指定した相手に電話をかける | ✅ 記載あり | — | 「Hey Meta, call [name] on WhatsApp」や通常の電話(訳:'Hey Meta, call [name] on WhatsApp' and phone calls) | 出典 |
この表の詳細欄には2点注意がある。多くの「はい」は英語限定かつ米国優先— カレンダーやメールの読み上げは米国の英語のみで記載されている。また、いくつかは通信が必須で、オフラインだとアシスタント自体が使えない。表の「はい」は、米国で英語を使い、通信がある場合の「はい」だ。
このパターンが示すもの
「できない」が並ぶ場所を見てみよう。provider(WeChatやFeishuはメッセージアプリのクローズドリストに入っていない)、
relay(GitHubにアクセスするには結局スマホ経由しか道がない)、platform(エージェント向けの一般的なフックも存在しない)。どれもバッテリーやカメラ、マイクの制約ではない。ハードウェアは音声を聞き取り、返事もできるが、誰と話せるかを決めているのはプラットフォーム側だ。これがエピソード1で語った「今」の教訓であり、失敗したデバイスも結局はコンピュータ性能ではなく別の要因で詰まった。そして、まさにこの条件をエピソード3が「予測」として追いかけている——P32027年半ばまでに、どの開発者でもグラス用アプリを公開できるようになるかどうか、という話だ。ゲストリストは少しずつ開き始めている。MetaのMuse agentはすでに1,500以上のサービスと連携し、「まもなく」グラス対応予定とされているし、Meta AI Connectorsはサービス側からアシスタントにアクションを提供できる——どちらもConnect 2026で発表されたが、日付や一般公開の予定はまだない(Meta: Muse,
Connectors)。つまり、P3状況は動き始めている。
なぜグラスは仕事のタスクをこなせないのか?——「なぜ」を5回掘る
- なぜできないのか?理由は、4自分の18タスク——WeChat、Feishu、GitHub、コーディングエージェント——は「未対応」と明記されており、それ以外の仕事用スタックについてもドキュメントは沈黙しているからだ。(訳:Evidence: the table above, generated from)
content/series/wearable-ladder/audit-tasks.yml. - なぜそれらのアプリが抜けているのか?グラスがつながるのはMetaが指定したプロバイダー——Messenger、WhatsApp、Instagram、そしてスマホのメッセージ——だけで、そのリストは閉じているからだ。 (訳:Evidence:)Meta help: message providers.
- なぜそれらのアプリは自分で追加できないのか?グラス用のサードパーティアプリはまだ一般公開できず、App Storeへの公開も「現時点ではサポートされていない」からだ。 (訳:Evidence:)Meta's iOS integration guide.
- なぜ、ツールキットが1.0になったのにダメなのか?なぜなら、1.0で追加された新機能はすべて「実験的」とされており、それを使うアプリは「まだ公開できない」と明記されているからだ。 証拠:toolkit 1.0 changelog.
- では、真のボトルネックはどこか。 根本はこうだ。仕事で使う場合、グラスの限界はハードウェアの性能ではなく、プラットフォームが誰を中に入れるかで決まる。同じデバイスがWhatsAppのメッセージは読み上げられるのに、WeChatのメッセージは読めない。 証拠:表のタスク1と3(同じデバイス、同じ操作、アプリだけ違い、結果は正反対)
運用編——次に動かすテスト
ドキュメントはあくまで主張にすぎない。テスト自体はすでに組み上げてあり、実際に稼働している:18タスクは事前に登録されており、
content/series/wearable-ladder/audit-tasks.yml各タスクごとに「完了」の定義があり、このサイトのオーナー専用の電話ページ(/glasses-audit)が、実施のたびに各試行を記録する——成功か、失敗ならどの8層で止まったかも含めて。
node scripts/glasses-audit.mjs pullがログをリポジトリに取り込み、このページは計測結果をドキュメント記載の隣に並べて再構築される。
各失敗レイヤーが意味するもの——2026-09-25時点、実施前に記載
- wake(アシスタントが起動しなかった、または聞き取りをやめた):ここが詰まれば玄関が閉まる。ウェイクワードが反応しないなら、開発者が何を作っても直せない。これはMetaのファームウェアとマイクの領域で、修正もMetaの仕事だ。
- hearing(起動はしたがリクエストを聞き間違えた):屋外での音声認識が詰まる——人名、製品名、風。エピソード3で書いた「入力条件」(コマンドだけでなく書き込みも)が、ディスプレイより先に重要になることを示している。
- provider(必要なアプリが対応プロバイダーでなかった):閉じたプロバイダーリストが詰まりどころ。グラスはWhatsApp、Messenger、Instagram、電話としか話せず、仕事は他所で進む。解決策はリレー——これはエピソード3の主張(ノートPCがサーバー化)を前倒しで実現する形だ。
- network(電波なし・弱い):接続性が詰まりどころ。Meta AIはネットワーク必須だが、ロードトリップ中は常に繋がるとは限らない。より高性能なモデルよりも、まずはオンデバイスモデルの必要性を示唆している。
- power(バッテリー切れ、省電力、発熱):電源が詰まりどころ——これはエピソード1で「バッテリーと熱が死因ゼロの主因」とした内容と矛盾する。もしこれが起きたら、エピソード1の「心臓仮説」を再読することになるし、実際そうする。
- 出力(答えは返ってきたが、耳で聞いても実用にならなかった場合):ここで詰まるのは出力チャネルだ。音声だけでは情報量が足りない。ディスプレイが必要だという議論になり、これは第1話で「コストのかかる部分」として警告されていた。
- プラットフォーム(公式に明記されたプラットフォームの制限——60秒のボイスノート、3分の動画、APIなし):ここで詰まるのはエンジニアリングではなく方策だ。制限はルールとして書かれており、それ自体が選択の結果である。そしてその選択は次のConnectで変わる可能性がある。
- リレー(結局スマホやラップトップが必要だった場合):この作業では、グラスはハンズフリーではなく、スマホのリモコンでしかなかった。これは第3話の条件5、つまり「ラウンド中にコーナーが自律的に動けない」状態にあたる。
フィードバック——ドキュメントの外にあるもの
- それが本当に正しいかどうか。ヘルプページは古かったり、楽観的だったり、地域限定だったりする。Meta自身のページ同士で矛盾している箇所もある(ケース使用時のバッテリー寿命があるページでは24時間、別のページでは30時間)。
- 実際の使い心地。「対応」と書いてあっても、風の中で3回やり直すこともある。その日のタイミングを測らないと分からない。
- 自分のタスク。私のリストは創業者のものだが、看護師や学生なら全く違う並びになる。自分自身のリストを作ってみてほしい。
予測——今日の時点で書いておく
- 少なくとも11個の「ドキュメント化された」タスクは、最初の試行で通るはずだ。もしそれより少なければ、ドキュメントが楽観的すぎたということで、それがアップデートの見出しになる。
- すべての4「未対応」タスクは失敗し、最も多い失敗の原因は
providerかrelayになるはずだ。もし「未対応」タスクが通った場合、ドキュメントが製品に追いついていない——これも発見になる。 - 実測アップデートは2026-10-31までに公開予定——もし間に合わなければ、この行に理由を書く。
- もし
P5話の予測がで的中した場合(グラスのエージェントが自分のPCを操作できるようになったら)、このリスト全体を再度実行する。が現実になった場合(グラスのエージェントが自分のコンピュータを直接動かせるようになったら)、このリスト全体をもう一度検証する。
このエピソードがシリーズの中で担う位置づけ
| 発端 | シリーズの核となる発想 | 根底にある原理 | 主な登場人物 | |
|---|---|---|---|---|
| 過去(エピソード1) | 1968年、Sutherlandのヘッドマウントディスプレイ | 身につけるコンピュータ——視線を追いかける存在 | デバイスが消えた理由はコンピュータ性能ではなく経済だった | Sutherland · Reflection Technology · Google X · North · Snap · Magic Leap |
| 現在(エピソード2) | 2023年から2026年、カメラとスピーカーを備えたAIグラス | グラスは入出力だけを担い、考えるのは別の場所 | 電話が中継役、クラウドが頭脳 | Meta · EssilorLuxottica · Qualcomm |
| 未来(エピソード3) | 筋肉の動きを読むリストバンドとエージェントたち | 自分の意図そのものが入力装置になる | 1秒間に機械へ伝えられる情報量が新たなボトルネックになる | Meta Reality Labs(sEMG)· Google / Samsung(Android XR)· Apple(報道) |
同じ物語から分岐する5つの出口
| もしあなたが…… | この選択で変わる意思決定 | 一手で変わること |
|---|---|---|
| 学生なら | このメガネが勉強に使えるか | 自分のやることを全部書き出してみよう。もしMetaが公式に挙げていないアプリに依存しているなら、現時点で答えは「無理」だ。 |
| エンジニアなら | どこを作るか | 「できない」が並ぶ場所――メガネと仕事アプリをつなぐリレー――そこが解禁された瞬間に攻めろ。 |
| 創業者なら | チームにメガネを買うべきか | アイデア記録・メッセージ・カレンダー用途なら「買い」。仕事用アプリ群にはまだ時期尚早。 |
| 経営層なら | 職場でのメガネ活用 | チームのやりとりが既にリスト済みプロバイダー上で回っている現場でパイロット導入を。 |
| 投資家なら | メガネの投資ポイント | 狙うべきはプラットフォーム開放(P3)。ハードウェアのスペック表ではない。 |
30分でやる方法
- 入力: 何も調べず、普段ノートPCを開く理由を10〜20個書き出す。
- 出力: それぞれに「documented/not supported/undocumented」とリンクを付けて仕分ける。
- ルール: まずリストを書き、答えを見てからタスクを差し替えない。
- ストップルール: ドキュメントに記載がなければ「未記載」とする——推測はしない。
- 最小限の記録:
task, done_when, documented.verdict, documented.layer, documented.source. - あえて載せないもの: 実測値。これが「その日」であり、このページ後半の主役だ。
5S自己評価(根拠付き)
| S | 自己評価 | 根拠 |
|---|---|---|
| シンプル | 4/5 | 一枚の図——ハイライトではなくルールブック——と一つの数字:11 / 18. |
| ソリッド | 4/5 | すべての判定にMeta公式ページへのリンクが付いているcontent/series/wearable-ladder/audit-tasks.yml。5点満点ではない:ドキュメントは実測値ではなく、このエディションはそれを明記している。 |
| シャープ | 4/5 | 同じデバイスがWhatsAppのメッセージは読めてWeChatは読めない——「5つのなぜ」(the five whys)を参照. |
| SMART | 4/5 | 当日の予測を3つ書き出し、scripts/glasses-audit.mjs pull が実行されたときに採点する。 |
| サプライズ | 3/5 | 制約はハードウェアではなく「ゲストリスト」——「プロバイダーリスト」(the provider list)を参照. |
関連
content/series/wearable-ladder/audit-tasks.yml から自動生成されている。ロードトリップの実測結果は日付入りで横に追記される。