Appleは、「ヘッドマウントデバイス用スタイラスベース入力システム」に関する新たな特許(特許番号2020033891)を出願しました。この特許では、Apple Pencilが、噂されている拡張現実(AR)/仮想現実(VR)/複合現実(MR)ヘッドマウントディスプレイ(HMD)「Apple Glasses」と連携する方法が明らかにされています。
この特許は、発光体を備えたスタイラスと、発光体を検出するように構成された光センサーを備えたヘッドマウントデバイスと、光センサーに通信接続され、発光された光の検出に基づいてスタイラスの位置を決定するように構成されたプロセッサとを含む追跡システムに関するものである。

つまり、iPad(そして将来的にはiPhoneも)で文字や絵を書いたり、Apple Glassesを装着した時の視界に重ねて表示できるようになるのです。さらに、Apple Pencilを空中で動かすと、その動きがヘッドマウントディスプレイに反映されます。
なぜこのようなインタラクションが必要なのでしょうか?Appleは特許出願の中で、HMDをユーザーが装着することで、ユーザーの視野内に視覚情報を表示できると述べています。HMDは、仮想現実(VR)システム、拡張現実(AR)システム、あるいは複合現実(MR)システムとして使用できます。ユーザーは、ディスプレイに表示される視覚情報など、ヘッドマウントデバイスからの出力を観察できます。
ディスプレイは、オプションとして、ユーザーがヘッドマウントデバイスの外部の環境を観察できるようにすることができます。ヘッドマウントデバイスが提供するその他の出力には、スピーカー出力や触覚フィードバックなどがあります。ユーザーは、ヘッドマウントデバイスの1つ以上のコンポーネントによる処理のための入力を提供することで、ヘッドマウントデバイスとさらにインタラクションを行うことができます。例えば、ユーザーは、デバイスを頭部に装着した状態で、触覚入力、音声コマンド、その他の入力を行うことができます。
Apple Glassesに関しては、噂の信憑性にもよりますが、来年か2022年に登場予定です。ヘッドマウントディスプレイになるかもしれませんし、「普通の」メガネのようなデザインになるかもしれませんし、あるいは両方になるかもしれません。Apple GlassesはiPhoneに接続して動作させる必要があるかもしれませんし、そうでないかもしれません。他の噂では、Apple GlassesにはカスタムメイドのAppleチップと「rOS」(リアリティ・オペレーティングシステム)と呼ばれる専用オペレーティングシステムが搭載される可能性があると言われています。
(デニス・セラーズは1996年からApple業界を取材しています。「Apple World Today」に加え、フリーランスのライティング/編集サービスも運営しています。後者についてさらに詳しく知りたい方は、[email protected]までメールでお問い合わせください。)