新たに付与された Apple の特許 (番号 10,861,210) は、将来の Apple デバイスがユーザーの顔と声に基づいたオーディオおよびビデオ機能を提供する可能性があることを示しています。
本発明は、ユーザの顔の特徴および/または音声の特徴に少なくとも部分的に基づいて、音声および/またはビデオ効果を提供するためのシステム、方法、およびコンピュータ読み取り可能な媒体に関する。例えば、ユーザのビデオおよび/または音声信号をデバイスで記録することができる。音声音声特徴および顔の特徴は、それぞれ音声音声信号およびビデオから抽出することができる。ユーザの顔の特徴は、仮想アバターの特徴を修正し、ユーザの顔の特徴を模倣するために使用することができる。

抽出された音声特徴は、調整された音声信号を生成するために修正されるか、または音声特徴から音声信号が合成される。調整/合成された音声信号は、仮想アバターの音声をシミュレートすることができる。修正された映像/音声のプレビューは、ユーザーのデバイスで提供される場合がある。
この特許は、AppleのMemojiとAnimoji技術に関するものです。Animojiは、ユーザーが自分自身を表すアバター(例えば、人形)を選択できる技術です。Animojiは、まるでユーザーの動画のように動いたり話したりすることができます。Animojiは、ユーザーが楽しくクリエイティブな方法で絵文字のパーソナライズされたバージョンを作成することを可能にします。Memojiは、iOS 12のパーソナライズされた「Animoji」キャラクターの名称で、メッセージアプリ内で包括的かつ多様な特性から選択することで、独自の個性を形成できます。