Apple のコンセプトでは、HomePod のようなホーム エンターテイメント デバイスは、ローカル環境とユーザーの行動を分析することで改善できる可能性があり、室内を監視することで、ジェスチャーベースのオーディオ制御や、音量を下げるなどの状況に応じた応答を改善できる可能性があることが示唆されています。部屋が空いていたら。

木曜日に米国特許商標庁によって付与された、特許「ユーザーの存在とアクティビティに応答するためのマルチメディア コンピューティングまたはエンターテイメント システム」では、HomePod または別のコンピューティング デバイスがさまざまな方法でリアルタイムの 3 次元センサー データをどのように活用できるかについて説明しています。

このマップ データを使用して部屋の深度マップを作成し、家具の移動や新しい家具の移動などの変化に対応して時間の経過とともに更新され、デバイスに部屋のレイアウトに関する情報と、将来の部屋スキャンと比較するための背景を提供できます。 。理論的には、これによりシステムは白紙の状態でライブ データと比較できるため、ユーザーがどこにいるかを知ることができます。

検出されると、深度マップ データを使用してユーザーの手を検出し、マッピング領域全体をセグメント化して関連するセクションだけに絞り込むことができます。その後、マップは以前の結果を改良して、手、腕、およびユーザーの残りの部分をより正確に検出できます。

Apple によると、現在のジェスチャ認識システムでは、指やその向きなど、手の個々の部分を検出できない可能性があり、多くの場合、認識が困難になります。提案されたシステムは理論的には指の位置を検出できるため、ジェスチャ認識により適したものになります。

注目すべきことに、この特許は、提案されたシステムが状況のコンテキストを使用して、ユーザーの希望と完全に一致しないアクションを含む、取るべきアクションを決定する可能性も示唆しています。一例として、より大きな音量を求める年配のユーザーの要求が挙げられます。システムは、これを音声出力を強調する要求として解釈し、平均音量を上げる代わりにメディアからの音声を増幅する可能性があります。

この特許はまた、一部の実施形態では、システムは「明示的にシステムに向けられている場合もそうでない場合もある」ユーザーの意図または要望に応答できるとも付け加えている。例としては、ユーザーが部屋から出ていくのが観察された場合、または音響反射率の低い環境の一部に戻ってきた場合に、音量を調整して補償することができる場合に音楽再生を一時停止することが挙げられます。

Apple は定期的に USPTO に大量の特許出願を行っていますが、出願書類の発見は、Apple が記載されている概念を将来の消費者向けデバイスで使用することを保証するものではありません。

Apple 製品の 1 つである HomePod は、いくつかの機能を備えています。部屋の分析、マイクアレイからのフィードバックに基づいて出力を自動的に調整し、部屋を満たすサウンドを作り出します。これは適応型であり、HomePod が別の場所に移動されたときに新しい環境に適応することができますが、これは音によって行われ、デバイスは手のジェスチャーをまったく認識できません。

考えられる方法の 1 つは、HomePod のようなデバイスに、iPhone XのTrueDepthFace ID 認証用にユーザーの顔の深度マップを生成できるカメラ。また、アニ文字や一部のマスクベースのカメラフィルターなどの機能のためにユーザーの顔の部分を追跡することもできます。