AppleはVRとAR用の指先と顔のマッピングツールに取り組んでいます

Apple の 2 つの新しい特許には、ユーザーが VR オブジェクトに触れて操作する方法を改善する方法と、ヘッドセットをより簡単に調整してフィット感を高める方法が記載されています。

りんごより良いものを作る方法を研究し続けますバーチャルそして拡張現実ユーザーのためのエクスペリエンス。 2 つの別々の新しい特許は、どちらも VR/AR テクノロジーの装着の煩わしさを軽減し、より便利なものにすることを目的としています。

2 つのうち最初の 1 つ目、「フィンガーデバイスを備えたコンピュータシステム」は、ユーザーが仮想空間内のアイテムを操作しやすくすることに重点を置いています。

「仮想現実システムでは、仮想オブジェクトを制御するためにフォースフィードバックグローブを使用できます」とそれは述べています。「携帯電話には、タッチ入力に応じて触覚フィードバックを生成するために使用されるタッチスクリーンディスプレイやバイブレーターが搭載されている場合があります。このようなデバイスはユーザーにとって不便であったり、扱いにくく不快であったり、不適切なフィードバックを提供する可能性があります。」

着用しにくい大きな手袋や最小限のフィードバックしか提供できない触覚フィードバックディスプレイの代わりに、Apple は指に装着できるスリムなセンサーを提案しています。

「タッチセンサーは、外部の物体がハウジングの外面に沿って移動するときに外部の物体からの入力を収集するために、指装置のハウジングに取り付けられる場合がある」と続けている。「外部物体は、例えば、指装置内に収容される指以外の指の先端であってもよい。」

「ユーザーの指入力は仮想オブジェクトの操作に使用される可能性がある」としている。「たとえば、可動コントロールに対応する仮想オブジェクトは、指デバイスを使用して収集された指入力に基づいてユーザーが移動したり、表示されたメニューオプションを選択したりできます。一部の構成では、ユーザーは現実世界のオブジェクトと対話しながら、コンピュータで生成されたコンテンツは、オブジェクトの一部またはすべてにオーバーレイされます。」

指に装着したセンサーデバイスの例

このフィンガーデバイスの特許に記載されている 20 人の発明者のうち、Chang Zhang 氏と Tianjia Sun 氏も最近「」に名前が挙げられています。クロスデバイスインタラクション同様に、Paul X. Wang もクレジットされています。布地を使用した指装着型デバイス」一方、ニコライ・ゲオルグは「」の発明者です。実際の物理オブジェクトを基準にして仮想オブジェクトの位置を特定するための手法。」

仮想オブジェクトを見つけて操作できることの一部には、それらを見ることができることが関係しており、Apple の別の特許は、AR と VR に対する主な障害の 1 つに対処することを目的としています。かさばるヘッドセットは最終的にメガネに置き換わる可能性がありますが、現時点では必須です。コストがかかるということは、できるだけ多くの人にフィットするように作られているということですが、使いにくいということは、個々のユーザーに合わせて単純に調整することが難しいということを意味します。

「ヘッドマウントデバイスがユーザーの頭に十分にフィットすることを確認するのは難しい場合があります。」アップルは言う「顔のマッピングを備えた調整可能な電子デバイスシステム」で。「注意しないと、ヘッドマウントデバイスが適切にフィットせず、快適に使用できなくなります。」

Apple は、そのようなヘッドセットには、次のようなセンサーが使用される可能性があると提案しています。顔認証ユーザーの顔をスキャンします。

「ヘッドマウントデバイスまたはヘッドマウントデバイスと通信する外部機器には、3次元イメージセンサーが含まれる場合があります」と説明されています。「三次元画像センサーは、ユーザーの顔の三次元画像をキャプチャすることができます。」

「制御回路は三次元画像を分析して、ユーザーの頭部へのヘッドマウントデバイスのフィット感を最適化するために、カスタマイズされたフェイスフィットモジュールの複数のバージョンのうちどれをヘッドマウントデバイスで使用すべきかを決定する可能性があります」と続けています。。

ただし、ヘッドセットは、装着したときに顔の周りで自動的に変化したり調整されたりすることはありません。代わりに、最初のスキャンでは、ユーザーまたはサポートスタッフが最適な「カスタマイズされた顔フィットモジュール」を選択できるように、別の外部画面に情報が表示されます。

特許には「[モジュールは]ユーザーの顔の3次元画像におけるユーザーの顔の特徴に基づいて選択される可能性がある」と記載されており、「顔の大きさやユーザーの額、鼻、頬の形状など」としている。

固定要素と、フィット感を高めるための調整または交換可能な要素を備えたヘッドセットを示す詳細図

ヘッドセットの本体は同じままですが、この「顔のフィット」計算に最もよく適合するように変更できる交換可能な要素が含まれています。

「ユーザーがどのバージョンのフェイスフィットモジュールを使用するかを特定した後、そのバージョンのフェイスフィットモジュールはヘッドマウント用のメインユニットの非カスタム部分に結合される可能性がある」と続けている。磁石やその他の結合構造を使用したデバイス。」

アップルはこれまでにも、ARスマートグラスの発売が予測される今年。

また、AR ユーザーが「」を着用するシステムの特許も以前に取得しています。軽蔑する」と指に。