イスラエルに本拠を置く3Dマッピング研究開発会社PrimeSenseから特許の再譲渡を受けてから1か月後の火曜日、Appleは、以前概要を説明したモーションセンシングハードウェアと併用できるソフトウェア実装の詳細を詳述する別の資産を付与された。
米国特許商標庁が Apple の米国特許を譲渡第8,933,876号これは「三次元ユーザー インターフェイス セッション コントロール」用であり、よりわかりやすく言えば、PrimeSense のモーション センシング ハードウェアで使用するソフトウェア UI です。
実際には、特許取得済みのシステムには、動きと深さを感知する光学センサーが組み込まれており、その概要は次のとおりです。以前に再割り当てされたこの特許は、ユーザーのジェスチャーを認識してコンピューターのコマンドに変換できる 3 次元の非触覚ユーザー インターフェイスを作成する独自のソフトウェアを備えています。
具体的には、本発明は、カメラ/センサー設定から追跡、動き、および深さの入力データを取得し、それを3Dユーザーインターフェースに適用する。ユーザーは、X、Y、Z 軸に沿った 3D 座標平面内で認識される複数の点に沿って手を動かしてジェスチャを作成し、その後、ホスト コンピュータによってアプリまたはシステム コマンドとして処理されます。一例では、ユーザは、垂直軸に沿って上向きのジェスチャを行うことにより、システムUIのロックを解除することができる。
この特許によると、デバイス自体は、ロック/ロック解除、追跡/非追跡、アクティブ/非アクティブの任意の組み合わせを含む 3 つの異なる動作状態の間を移動します。たとえば、センシング デバイスがロックされている場合、不用意なロック解除コマンドを避けるために、ユーザー入力を追跡せずに無視している可能性もあります。このシナリオでは、UI も非アクティブな状態のままになります。
ユーザーは、「フォーカス ジェスチャ」を実行することで、ロック解除コマンドの受信をデバイスに通知できます。これらの特殊な動きがデバイスと連動し、デバイスを非追跡/非アクティブ状態からロック/追跡/アクティブ状態に戻します。たとえば、フォーカス ジェスチャには、センサーが正しく認識されると、モーション トラッキングが有効になり、UI がアクティブになる、手の「押す」または「振る」ことが必要になります。
フォーカス ジェスチャの規定に加えて、ユーザー入力をキャンセルするためのグラフィカルで操作的な解決策を説明する「セッションの削除」方法も用意されています。たとえば、ソフト バー (上の図ではシステム ドックとして示されている) を呼び出すシナリオでは、ユーザーは手を挙げてロックを解除し、モーション トラッキングをアクティブにします。ユーザーがセンサー ハードウェアの視野から手を落とすと、同様にセッションが切断され、非アクティブな UI 状態を反映するためにサンプルのソフト バーが画面から外れます。
この点に基づいて、Apple の特許は、ユーザーのジェスチャーがセンサーの視野内にある必要があることを指摘しています。これは一見明白な要件ですが、実装を誤るとポジティブなユーザー エクスペリエンスを損なう可能性があります。この特許は、ユーザーが視野内に位置するとオンボードのライトアレイが点灯し、システムが入力の準備ができているという視覚的な合図を与えるように構成することを提案しています。
本日の特許開示は、3D マッピングおよびモーション トラッキング デバイスを対象とする別の PrimeSense 特許の 12 月の再譲渡に続くものです。同社は、Microsoft によるオリジナルの Xbox Kinect センサーの構築を支援したときに、非常によく似た赤外線モーション トラッキング テクノロジーを適用しました。
Apple は 2013 年に、この間の価値のある取引の一環として PrimeSense とその特許を購入しました。3億4,500万ドルそして3億6000万ドル。買収後、業界関係者は、Apple は次のようなことを行うだろうと主張した。組み込まれている可能性が高い改良された Apple TV ユニットにモーションセンシングのハードウェアとソフトウェアが組み込まれていますが、このデバイスはまだ導入されていません。
最近の報道によると、Apple の次世代セットトップ ストリーマのリリースは辺獄の中で面倒なライセンス条件でコンテンツを閉じ込めておきたいケーブルプロバイダーとの交渉が行き詰まっているためだ。
Apple の 3D ユーザー インターフェイス特許は 2011 年 12 月に初めて申請され、Micha Galor、Jonathan Pokrass、Amir Hoffnung が発明者として認められています。