Appleは、AnimojiやMemoji機能、およびその他のアプリケーションに関連する「リアルタイムの顔アニメーションのためのオンラインモデリング」の特許（特許番号10,586,372）を申請した。
アニ文字を使えば、ユーザーは自分のアバターを選択できます。アニ文字はまるでユーザーの動画のように動いたり話したりすることができます。
アニ文字を使えば、ユーザーは楽しくクリエイティブな方法で絵文字のパーソナライズ版を作成できます。ミー文字は、iOSのパーソナライズされたアニ文字キャラクターの名称です。メッセージアプリ内で、包括的で多様なキャラクターの中から好きなものを選んで作成・カスタマイズし、個性的なキャラクターを作り上げることができます。
Appleは特許出願の中で、リアルタイムパフォーマンスキャプチャの近年の進歩により、新たな形の人間コミュニケーションが実現可能になったと述べています。ユーザーの動的な表情をキャプチャし、それをデジタルキャラクターにリターゲティングすることで、リアルタイムフィードバックを伴う仮想アバターを用いたコミュニケーションが可能になります。しかし、顔アニメーション技術を大規模に展開するには、パフォーマンスとユーザビリティに対する高い要求が求められます。
しかしAppleは、ハイエンドのアニメーション制作で一般的に使用されている最先端のマーカーベースシステム、マルチカメラキャプチャデバイス、あるいは侵入型スキャナは、コンシューマーレベルのアプリケーションには適していないと指摘しています。同社はこの状況を変えたいと考えています。
発明の概要は以下のとおりです。「実施形態は、リアルタイム顔アニメーションの方法、およびリアルタイム顔アニメーションの処理装置に関する。この方法は、動的表情モデルを提供すること、ユーザの顔表情に対応する追跡データを受信すること、動的表情モデルと追跡データに基づいて追跡パラメータを推定すること、および追跡データと推定された追跡パラメータに基づいて動的表情モデルを改良することを含む。この方法はさらに、追跡パラメータに基づいてユーザの顔表情に対応するグラフィカル表現を生成することを含むことができる。実施形態は、リアルタイム顔アニメーションシステムに関する。」
