Appleは、「拡張現実シーンを合成する方法およびシステム」に関する特許(特許番号10,565,796)を取得した。これは、同社が噂されている「Apple Glasses」など、さまざまなデバイス上での拡張現実(AR)コンテンツとインタラクションに関して大きな計画を立てていることを示すものだ。
噂の信憑性次第で、このデバイスは今年、来年、あるいは2021年に登場します。動作させるためにiPhoneに接続する必要の有無は不明です。また、Apple GlassesにはカスタムメイドのAppleチップと「rOS」(リアリティ・オペレーティング・システム)と呼ばれる専用OSが搭載されるという噂もあります。

新たに付与された特許には、AppleのARKitも含まれています。開発者は最新のコンピュータービジョン技術を活用して、インタラクティブなゲーム、没入型ショッピング体験、工業デザインなど、現実世界のシーン上に詳細な仮想コンテンツを構築できるようになります。
Appleは特許データの中で、仮想コンテンツ(ARコンテンツなど)は通常、データベース(ライブラリ)またはモデルファイルに保存され、ARシステムによってレンダリングのために取得されると指摘しています。つまり、コンテンツはデジタル形式で保存され、編集などの操作には専用のコンピュータソフトウェアが必要になります。
ARシステムのコンテンツライブラリ/データベースは、通常、拡張デバイス上でローカルに管理されるか、データベースサーバー上でリモートに管理されます。ユーザーデバイス上のローカルライブラリの更新は、比較的複雑な作業です(特にデバイスが多数のユーザー間で分散されている場合)。リモートライブラリ(データベース)の更新は比較的シンプルで集中管理された作業ですが、Appleが指摘しているように、インターネットや携帯電話ネットワークなどのデータネットワークへの接続が必要です。
テクノロジー界の巨人であるAppleは、ARコンテンツを画像(例えばスケッチ)に埋め込むAR手法とシステムの必要性を指摘しています。ARコンテンツをローカルまたはリモートのライブラリ/データベースからダウンロードする必要がなく、画像上に手書きでスケッチするだけで埋め込まれたコンテンツとのインタラクションが可能になります。また、コンテンツには二重知覚技術が求められています。二重知覚とは、埋め込まれたARコンテンツがARシステムを使用せずに視覚的に理解可能であることを意味します。最後に、AppleはARコンテンツと簡単にインタラクトできる方法を提供する必要性を指摘しています。
特許の概要は次のとおりです。「拡張現実シーンを合成するシステムおよび方法が開示される。この方法は、抽出コンポーネントによって、感知装置によって検出された現実世界の画像から少なくとも 1 つのオブジェクトをデータ処理マシンのメモリに抽出するステップと、少なくとも 1 つのオブジェクトから少なくとも 1 つの仮想モデルを幾何学的に再構築するステップと、少なくとも 1 つの仮想モデルから AR コンテンツを合成して現実世界の画像上の AR コンテンツを拡張し、それによって AR シーンを作成するステップとを含む。」
「好ましくは、本方法はさらに、少なくとも一つの注釈を現実世界画像からデータ処理機械のメモリに抽出し、少なくとも一つの注釈に基づいて少なくとも一つの仮想モデルを修正することを含む。好ましくは、本方法はさらに、現実世界画像内の少なくとも一つのオブジェクトおよび/または少なくとも一つの注釈の修正に基づいてARコンテンツを修正することにより、ARシーンとインタラクションすることを含む。」