Appleは、「コントローラー付き電子デバイスシステム」に関する特許（特許番号20200356162）を出願しました。これは、同社が開発中と噂されている拡張現実（AR）、仮想現実（VR）、複合現実（MR）ヘッドマウントディスプレイ（HMD）「Apple Glasses」と連携する、手持ち式のデバイスに関するものです。
HMDをハンドコントローラーと連携させ、視覚コンテンツとのインタラクションを実現するというアイデアです。例えば、コントローラーはディスプレイ上のアイテムを操作する際に使用される手の動きを検出します。
光センサーなどの入出力デバイスは、ユーザーが現実世界の物体とインタラクションする際に、ユーザーの指の位置に関する情報を収集するために使用できます。例えば、ユーザーの指先がテーブルやその他の現実世界の面に触れる場合があります。
センサーは、ユーザーの環境における現実世界のオブジェクトの位置など、他の情報も収集する可能性があります。位置センサーが筐体の動きを検知すると、センサーは指の位置情報やその他の情報をリアルタイムで収集します。これは、特に拡張現実（AR）/仮想現実（VR）ゲームをプレイする際に非常に役立ちます。
Apple Glassesに関しては、噂の信憑性にもよりますが、来年か2022年に登場予定です。ヘッドマウントディスプレイになるかもしれませんし、「普通の」メガネのようなデザインになるかもしれませんし、あるいは両方になるかもしれません。Apple GlassesはiPhoneに接続して動作させる必要があるかもしれませんし、そうでないかもしれません。他の噂では、Apple GlassesにはカスタムメイドのAppleチップと「rOS」（リアリティ・オペレーティングシステム）と呼ばれる専用オペレーティングシステムが搭載される可能性があると言われています。
