Appleは、10年ぶりの重要な新製品をまもなく発表します。噂によると、Reality Proと呼ばれるこの製品は、他に類を見ないVRヘッドセットになるそうです。いや、ARヘッドセットのことです。いや、ARとVRを自由に切り替えるダイヤルを備えたMRヘッドセットでしょうか…
Google、Microsoft、Sony、Facebook/Metaといった大手企業が長年ヘッドセットを発売しているにもかかわらず、AR、VR、MRの意味を理解している人はまだ少ないのが現状です。AppleがReality Proを私たちの顔に解き放つ前に、これらの言葉の意味を明確にし、Appleの新しいプラットフォームに何が期待できるのかを議論しましょう。
まずは簡単なところから始めましょう。バーチャルリアリティ（VR）製品は、視野を広げるためのレンズを備えたスクリーンを目の前に設置します。通常は2つのスクリーン（または1つを半分に分割したもの）があり、それぞれのスクリーンに左右の目の視点を表示することで、真の3D効果を実現します。
ヘッドセットの動きと位置は、ジャイロスコープとセンサーで追跡し、画面上のわずかな動きに合わせて視界を調整する必要があります。没入感を高め、乗り物酔いを防ぐためには、この処理を極めて高速に行う必要があり、「モーション・トゥ・フォトン・レイテンシー」（頭の動きからその変化がディスプレイに出力されるまでの時間）を非常に短くする必要があります。
最終的な効果は、まるで完全にコンピューターで生成された空間にいるかのような錯覚に陥ることです。漫画風だったりリアルだったりしますが、環境もその中のあらゆるものも、すべてがコンピューターグラフィックスでできています。これがVRです。もはや現実世界ではなく、すべてが仮想世界なのです。
製品例: Meta Quest、PlayStation VR、HTC Vive、Valve Index
メタ
拡張現実
拡張現実（AR）は、現実世界を仮想世界に置き換えるのではなく、デジタルオブジェクトを現実世界に組み込むものです。これは、iPhoneのARアプリのような画面上、ヘッドセット、あるいはメガネを使ったARなど、様々な方法で実現できます。
基本的な考え方は、現実世界を見ているのに、アイコン、矢印、テキスト、フローティング ビデオ スクリーン、人物など、コンピューターで生成されたものが追加されるというものです。
重要な点は、グラフィックが現実世界に存在しているように見える必要があるということです。ARオブジェクトは、ユーザーが移動しても現実世界の同じ場所に留まり、地面、テーブル、壁、さらには人といった現実世界の地形と相互作用することもあります。目の前の透明なディスプレイに浮かぶグラフィックを単に表示するだけではARとは言えません。
ARには、周囲の環境の基本的な3Dマッピングが少なくとも必要であり、これは通常、複数のカメラとLIDARなどのセンサーを用いて実現されます。多くの製品はARを謳っていますが、実際にはコンピュータグラフィックスを現実世界に統合できないため、より正確には「ヘッドアップディスプレイ」と呼ばれます。これらの製品は、周囲の3Dマップを作成してグラフィックスを統合するのではなく、目の前に物体を浮かび上がらせるだけです。Google Glass、Nreal Air、Vuzix Blade 2などがその例です。
Pokémon GOはARアプリとしてよく挙げられますが、これは現実世界でプレイするという事実と混同されがちです。これは単なる位置情報ゲームであり、ARではありません。ゲームにはAR要素が少しだけあります。モンスターボールを投げてポケモンを捕まえる際に、「ARモード」に切り替えることで、スマートフォンの画面上に現実世界のターゲットポケモンを表示できます。この部分だけでもARと言えるでしょう。（そしてほとんどのプレイヤーはARをオフにしています。）
ARヘッドセットは、外部カメラを使って周囲の映像をリアルタイムで内部スクリーンに映し出すため、VRヘッドセットと見た目は似ても似つかないものになるかもしれません。AppleのReality Proはまさにこの仕組みで動作することが想定されており、透明なスクリーンと一体型のディスプレイを備え、現実世界そのものを直接見ることができるMicrosoft HoloLensのような製品とは対照的です。
それでも、目の前にただ浮かんでいるのではなく、コンピューター生成のグラフィックスが統合された、周囲の現実の世界をリアルタイムで見ている限り、それは拡張現実とみなされます。
製品の例: Microsoft HoloLens、Magic Leap、そして近々発売される次世代の Snap Spectacles は、実際の AR グラスまたはヘッドセットとして適格です。
マイクロソフト
複合現実
ここからが混乱の始まりです。どうやらAR（拡張現実）は十分に拡張されていないようで、業界ではARとバーチャルディスプレイやヘッドアップディスプレイ、そしてARスマホアプリなどを明確に区別できないような用語を作り出しているようです。
複合現実（MR）を調べると、「現実世界と仮想世界をより没入感のある方法で融合させる」や「複数のユーザーが仮想空間で相互にやり取りできるようにする」といった、あまり正確ではない表現でいっぱいの、十数種類の異なる定義が見つかります。仮想オブジェクトを自分の手で操作する必要があると言う人もいれば、コントローラーを使用できると言う人もいます。
IntelはMRについて、「現実世界とデジタル要素を融合させる」（ARがまさにそれを実現する）と述べている。「片足（あるいは片手）を現実世界に、もう片方を想像上の場所に置くことができる。現実と想像上の世界という基本概念を崩し、ゲームや仕事のやり方を一変させるような体験を提供する」としている。詩的な表現だが、特に役に立つわけではない。
一方、マイクロソフトは「生活空間や友人とのデータとの直感的なインタラクションを提供することで、画面に縛られた体験から私たちを解放します」と述べています。データとの「直感的なインタラクション」が一体何なのかは分かりませんが、非常に退屈な話に聞こえます。「Instagramで使っているARフィルターが複合現実体験であることに、人々は気づかないかもしれません。」
そのため、最大手のテクノロジー企業の間でも、MR をどのように定義するか、または製品や体験が複合現実と分類されるための最低基準について合意が得られていないようです。
複合現実（MR）は拡張現実（AR）の上位概念だと捉えるのが良いでしょう。ARは、インタラクションと没入感の最低基準がより高くなっています。スマートフォンやタブレットの画面に表示されるのではなく、自分の目で（透明なメガネを通して、あるいは外部カメラからのパススルー映像を映し出すヘッドセットを通して）見ることになります。そして、MRは現実世界に統合された情報を表示するだけでなく、仮想オブジェクトとインタラクションしたり、オブジェクトが環境とインタラクションしたりすることを可能にします。
グーグル
Apple Reality Proに期待すること
Appleのヘッドセットについて私たちが知っている限りでは、比類のないVR、AR、MR体験を提供するとのことです。外界の視界を遮るスキーゴーグルに似たようなヘッドセットだと言われています。
複数のカメラが周囲の世界をリアルタイムで映し出し、多数のセンサーが周囲の3Dマップを作成します。仮想オブジェクトはマップに統合され、相互作用します。アプリを操作したり、手を使ってオブジェクトを操作したりできるだけでなく、内蔵センサーが目の動きまで検知します。
Apple Watchのデジタルクラウンに似た外側のダイヤルで、外界をどの程度表示するかを調整できます。ダイヤルを片側に回すと外界は遮断され、仮想環境（VR）のみが表示されます。反対に回すと、コンピューター生成グラフィックス（AR/MR）が組み込まれた、完全な現実世界（複数の外部カメラからヘッドセットのディスプレイに送られる）が表示されます。
Reality Proの機能については、おそらく6月5日のWWDC基調講演で正式に発表された際に詳細が明らかになるでしょう。現在の噂が本当であれば、品質、ディテール、没入感、インタラクション…そして価格において新たな高水準を設定することになり、おそらく3,000ドルにも達するでしょう。
