レーダーとLiDARを組み合わせて、現在ではiPad ProiPhone 12 Pro の「Apple Glass」は、光が弱すぎてはっきり見えないときに、着用者の周囲の環境を感知することができます。
私たちは行ってきましたゆっくりと学ぶApple が次のようなデバイスの LiDAR センサーについて計画していることiPhone12プロ、オートフォーカスを支援するためにそれを使用します。ただし、その焦点調節補助は、暗い環境で特に役立ちます。Apple は、その機能を活用して支援する設計を行っています。」アップルグラス「着用者。
「低照度動作対応ヘッドマウントディスプレイ」は、新たに明らかになったこの特許出願には、ヘッドマウント ディスプレイ (HMD) の装着者の周囲の環境を感知する複数の方法が記載されています。
「人間の目の感度は、照明条件が異なると異なります」と Apple は始めます。次に、明所視から薄明視まで、異なる種類や量の光が異なる「目の錐体細胞」に依存する、人間の視覚のさまざまな形式について詳しく説明します。
明所視は、「日光などの高レベルの周囲光」中に目がどのように機能するかとして説明されます。そしてアップルは、薄明視やその他の視覚は、それに比べてうまくいかないと警告している。
「明所視と比較して、これらは色覚の喪失、光の異なる波長に対する感度の変化、視力の低下、動きによるぼやけの増大を引き起こす可能性がある」とアップルは述べている。 「したがって、暗所視に頼っているときなど、照明が不十分な状況では、人は明るい状況に比べて環境を見る能力が低くなります。」
Appleが提案したソリューションは、「Apple Glass」などのHMD内のセンサーを使用して周囲の環境を記録する。結果は、不特定の「グラフィック コンテンツ」として着用者に中継されます。
環境を登録する鍵となるのは、オブジェクト間の距離を感知する能力と、奥行きを検出する能力です。 「深度センサーは環境を検出し、特にそこから環境の物体までの深さ(例えば距離)を検出する」とアップルは言う。
ヘッドマウントディスプレイにはレーダーやLiDARセンサーが含まれる可能性がある
「深度センサーには通常、照明器と検出器が含まれています」と続けています。 「照明器は電磁放射線(例えば赤外線)を環境に放射します。検出器は環境内の物体から反射された電磁放射線を観察します。」
Appleは、特許出願で説明されている検出器や方法を限定しないように注意しているが、「具体的な例」は提供している。 1 つは飛行時間と構造化光を使用する方法です。既知のパターンが環境に投影され、そのパターンを認識するのにかかる時間によって奥行きの詳細が得られます。
「他の例では、深度センサーはレーダー検出および測距センサー (RADAR) または光検出および測距センサー (LIDAR) である可能性があります」と Apple は述べています。 「例えば、構造化光センサー、飛行時間型カメラ、RADARセンサー、および/またはLIDARセンサーのうちの1つまたは複数を組み込んで、1つまたは複数のタイプの深度センサーを利用できることに留意すべきである。」
AppleのHMDも「超音波」を使用する可能性があるが、ヘッドセットが何を生成するかに関係なく、特許申請は周囲の正確な測定とその情報を装着者に伝えることを目的としている。
Apple は、「[HMD の] コントローラーは、1 つ以上の赤外線センサーまたは深度センサーと超音波センサーによる環境の感知に従ってグラフィック コンテンツを決定し、同時にグラフィック コンテンツを提供するためにディスプレイを操作します」と述べています。環境を感知して。」
この特許出願は 4 人の発明者によるものであり、それぞれが関連する以前の研究を行っています。その中には、AR および VR ツールに関するクレジットを持つ Trevor J. Ness も含まれます。フェイスマッピング。
また、「Apple Car」の乗客向けの AR および VR ヘッドセットの提供に関する以前の特許を取得しているフレッチャー R. ロスコップ氏も含まれています。彼らを病気にすることなく。
これはすべてのヘッドマウントディスプレイにとっての問題であり、この低照度特許出願と並行して、Apple は現在、見当識障害とその結果生じる乗り物酔いの可能性を軽減するために視線追跡を使用することに関連した問題を抱えています。
複合現実画像の視線追跡
「視線追跡機能を備えた画像強化デバイス」も新たに明らかになりました特許出願、今回は、ユーザーが頭を動かしている可能性があるときに AR 画像を提示することに焦点を当てています。
「複合現実コンテンツをユーザーに提示するのは難しい場合があります」と Apple は説明します。 「ユーザーに対する複合現実画像の表示は、たとえば、頭や目の動きによって中断される可能性があります。」
「ユーザーは異なる視覚能力を持っている可能性があります」と続けています。 「注意を怠ると、複合現実画像が表示され、見当識障害や乗り物酔いを引き起こし、ユーザーが興味のある項目を特定することが困難になります。」
ユーザーがどこを見ているかに応じて、「Apple Glass」は乗り物酔いを防ぐために画像を変更する可能性がある
提案されたソリューションは、部分的には、暗い環境での LiDAR 支援と非常によく似たアイデアを使用することです。ヘッドセットやその他のデバイスは、「実世界の画像を分析することで、コンテンツ、モーション、その他の画像属性に関する情報など、実世界の画像に関する情報を収集することもできます。」
これは、デバイスがユーザーの「ユーザーの視力、コントラスト感度、視野、幾何学的歪みなどの視覚情報」について知っていることと結びついています。ユーザーが設定できる任意の設定と合わせて、見当識障害を最小限に抑える方法で複合現実画像を表示できます。
「例として、乗り物酔いの影響を避けるために、ユーザーの注視点が比較的静止している場合にのみ、視覚障害のあるユーザー向けに現実世界の画像の一部が拡大されることがあります」と Apple は述べています。
この特許出願は、Christina G. Gambacorta を含む 4 人の発明者によるものです。彼女は以前、「Apple Glass」での視線追跡を使用して画質とバッテリー寿命のバランスをとることに関する関連特許に登録されていました。解像度を変更する着用者が見ているもの。