拡張現実（XR）ヘッドセットは、もはや新しいものではありません。私自身、今年初めにAppleのVision Proを購入したことで、XRヘッドセットに対する新鮮さは終わりを告げました。しかし、先週約30分間、サムスンのAndroid XR搭載「Project Moohan」を使用して、グーグルが基本的な部分をすべて習得していることを実感しました。さらに、Android XRはGeminiによって真の差別化要因を持ち、グーグルのこれまでの取り組みをシームレスかつ統合的な方法で集約しています。
XR（クロスリアリティ、Cross Reality）とは?
XR（クロスリアリティ、Cross Reality）は、物理空間（現実世界）とデジタル空間（仮想世界）を融合させた技術や体験を指す総称です。XRは、仮想空間と現実空間の間にあるさまざまな現実拡張技術を包括する概念で、以下のような技術を含みます：
XRの主な要素
- VR（Virtual Reality、仮想現実）
- 完全にデジタルで構築された仮想世界に没入する技術。
- 例：VRヘッドセットを使ってゲームや仮想空間での体験を楽しむ。
- AR（Augmented Reality、拡張現実）
- 現実の風景にデジタル情報を重ねて表示する技術。
- 例：スマホやARグラスで見える、現実の上に重なるキャラクターや地図情報。
- MR（Mixed Reality、複合現実）
- 仮想世界と現実世界をさらに深く融合させ、ユーザーが両者をインタラクティブに操作できる技術。
- 例：デジタルオブジェクトが現実空間に溶け込み、手で触れたり動かせる体験。
Project Moohanの特徴
ハードウェア
ハンズオン中、グーグルはハードウェアの写真撮影を許可しませんでしたが、すでに一部のアーリーアクセスパートナーに提供されており、今週開催された対面イベントに続いて、より多くの開発者がこのハードウェアを入手しています。これは、2025年に一般消費者に出荷される最終版のハードウェアに近いものです。
主にプラスチック製で、Qualcomm社のSnapdragon XR2+ Gen 2を搭載したMoohanは、比較すると過剰設計に見えるVision Proよりも大幅に軽量です。デフォルトでは、目の下の領域に現実世界の一部を見るための光の隙間はありません。ただし、磁気式のアタッチメントが用意されており、私はそれを使ってデモを行いました。後部のダイヤルを回すと、フィット感を調整できます。
外部バッテリーがあり、ヘッドセットから延びるワイヤーがUSB-C経由でバッテリーパックに接続されます。付属のバッテリーユニットに限定されることはありません。
最終的な目標は、軽量でエルゴノミクスに優れたハードウェアを提供することであり、サムスンはそれを達成しました。
ソフトウェア
Project Moohanの右側には、トラックパッド面があります。それをタップすると、時刻、クイック設定の行（グリッド形式の最近使用したアプリメニューを開く）、アプリのランチャーグリッドを組み合わせたUIオーバーレイが開きます。
親指と人差し指を合わせる（「ピンチ」と呼ばれる）ことでタップします。ポインティングに使用する手からの「レイ」と、ピンチしてズームする機能もあります。これらのAndroid XRジェスチャーは非常にシンプルで、うまく機能します。
また、手でポインティングする代わりに、目線で何かを見ることができるアイトラッキングも注目に値します。これは、ピンチと組み合わせて非常にうまく機能します。
次に、Gemini（具体的には、Gemini 2.0を搭載したProject Astra）について説明します。これは、クイック設定から有効にすると、視線の上に丸薬が表示されます。このモードでは、Geminiはユーザーのコマンドを聞き取り、仮想画面と前面カメラを通した現実世界の両方で、ユーザーが見ているものを認識します。
動画を見ていて何か面白いものを発見したら、Geminiに尋ねるだけです。これには、翻訳、Google Mapsでの会場の説明、YouTubeビデオで起こっていることの説明などが含まれます。Geminiは、現実世界についての質問にも答えることができます。例えば、目の前にサッカー/フットボールのジャージを着ている人がいる場合、Geminiにそのチームの調子を尋ねると、リーグランキングを含むGoogle検索のナレッジパネルが表示されます。
これは、2024年のI/Oで初めてデモされたAstraテクノロジーです。本当に印象的なのは、現実世界の他の人と会話しながら、Geminiが明示的に質問するまでバックグラウンドで静かにアクティブなままでいられることです。Geminiは、アプリを開いたりウィンドウを整理したりするためにも使用できます。これは、特に空間内を移動するにつれてアプリが重なりがちなXRにおいて重要です。
前置きや詳細な指定なしに、見ているものについて質問するのは、まるで隣に人がいるようにごく自然なことです。率直に言って、これはグーグルがこれまでGeminiに注いできたすべての努力を正当化するものです。音声は、LLMとのやり取りに最適な方法なのです。
グーグルのこれまでの取り組み
2020年、Google Photosは、任意の画像で偽の3Dを再現するCinematic photos機能を導入しました。当時は私にとって目新しいものに過ぎませんでしたが、Android XR用のGoogle Photosでのこの効果は、特に動画の場合、ほぼ実物大であるため、畏敬の念を抱かせるものです。フルスクリーンビューアで「没入」ボタンを有効にして、タブレット版のGoogle Photosアプリを使用しました（必要に応じて、電話版にリサイズすることもできます）。
2022年にGoogle Mapsが没入型ビュー（Immersive View）を発表したとき、その有用性は分かりましたが、私はスマートフォンでそのように閲覧したいとは思いませんでした。（また、ストリーミング解像度が不足していて、すべてがブロック状になっていると思います。）一方、ヘッドセットでは話が違います。静止画から再現された都市を飛び回ったり、建物内に入ったりできることは、旅行計画時のツールから、自由時間に探索したくなるようなゲーム的なものへと変化します。Google Mapsは、ユーティリティからYouTube動画レベルのコンテンツへと進化するのです。一方、ストリートビューは期待通りの楽しさです。
環境内のオブジェクトを選択してそれについて詳しく学ぶために、サークルを使って検索することは、2017年に発表されたGoogle レンズのビジョンを実現するものです。
Google検索の3D動物は、2020年に確かに人気を博しましたが、私は常に、スマートフォンベースの拡張現実はあまりにも制限が多いため、拡張現実に不利益をもたらしかねないと考えていました。ヘッドセットでは、本当に没入感があります。
最後に、グーグルがAndroid 12Lで「大画面」向けに最適化しようとしたのは、折りたたみ式デバイスと、タブレットの新たな普及に先駆けてのことでした。そのすべての取り組みがAndroid XRにどのように反映されているかは、計画立案の手本と言えるでしょう。グーグルアプリのタブレット版は、余分な作業なしでヘッドセットに自然に表示されます。物理的なBluetoothマウスとキーボードを使って、デスクトップのようなタブストリップを備えたAndroid版Chromeのタブレット版UIを使うのは、まさに我が家にいるような感覚でした。
Android XRの可能性
ほとんどの2D Androidアプリは、Android XR上で動作します。Play Storeでの提供には、開発者がオプトインするだけで済みます。グーグルは、主要なアプリを最適化しています。YouTube（既存の3Dコンテンツのライブラリを持つ）を視聴する際、メインウィンドウは動画で、その周りに、コントロール、説明、次の再生待ちのキューのための分離したフローティングペインがあります。また、そのウィンドウから空間オーディオが流れてきます。Google TVは、他のアプリが活用できる仮想シアターの背景を提供します。
グーグルが、Cinematic photos、大画面向けのAndroid、Immersive Viewを構築していた時点で、それらがいつかヘッドセットで動作することを実際に知っていたかどうかはわかりません。もしそうだとしたら、ほとんどの人がグーグルに期待しない、遠い未来のための驚くべき先見性と計画性が明らかになります。
グーグルがここ10年ほどの間に取り組んできたすべてのことが、来年発売予定のこのヘッドセットに集約されています。Android XRは、visionOSに匹敵するように思われますが、GeminiとProject Astraを使って、全く新しいながらも自然なものを提供しています。
まとめ
サムスンのProject Moohanは、Android XRの可能性を示すヘッドセットです。軽量でエルゴノミクスに優れたハードウェアに加え、Geminiを活用した自然な操作感が特徴です。さらに、グーグルのこれまでの取り組み、Cinematic photos、大画面向けのAndroid、Immersive View、3D動物などが集約され、シームレスに統合されています。
Android XRは、visionOSに匹敵する性能を発揮しつつ、GeminiとProject Astraによって、自然でありながら画期的な体験を提供します。グーグルの長年にわたる努力と先見性が実を結んだこのヘッドセットは、拡張現実の新たな可能性を感じさせてくれます。2025年の一般消費者向け発売が待ち遠しいですね。