Apple ARウェアラブルは視線を追跡し、読みやすさと省電力のために解像度を変更できる

Apple の複数の研究手法は、噂のようなウェアラブル AR デバイスの機能に焦点を当てています。アップルグラス「あなたが見ているものを感知し、着用者が必要とする情報を状況に応じて提示するように自身を再構成します。」

Appleの「Apple Glass」とそのすべてに関する幅広い計画アップルARその成果は複数の特許出願によって明らかにされています。これらは個別にファイルされていますが、結合して、人々が実際のデバイスと仮想デバイスをどのようにやり取りできるかという側面に取り組んでいる Apple の全体像に貢献しています。

現実世界の環境を検出する

4 件の特許出願は、ユーザーの周囲の現実および仮想環境の検出と操作に広く関係しています。 」環境ベースのアプリケーションプレゼンテーション」では、カメラが現実世界を見たものを一種の地図の基礎として解釈する方法を提案しています。

「（これを使用して）物理環境の幾何学的レイアウトが決定されます」とアプリケーションは述べています。 「物理環境のタイプに基づいて、物理環境の表現に対応して 1 つまたは複数の仮想現実オブジェクトが表示されます。」

したがって、環境の物理的なレイアウトが確立されると、システムは仮想オブジェクトを正確に配置できます。

我々はまだ目標には程遠いスタートレックしたがって、このシステムとそのすべては、ユーザーが着用する必要があるヘッドセットに関連する問題に触れています。 」虚像距離調整および補正レンズを備えた表示システム」では、視覚に問題がある人にとってヘッドセットがどのように機能するかを取り上げています。

このアプリケーションには、「ヘッドマウントデバイスの一部のユーザーは、近視、遠視、乱視、老眼などの視覚障害を抱えています」と記載されています。 「ヘッドマウント デバイスの光学システムがコンピュータ生成コンテンツを満足のいくように表示し、視覚障害を持つユーザーに満足のいく視聴体験を提供することを保証するのは困難な場合があります。」

「注意を怠ると、視覚障害のあるユーザーが表示されているコンテンツに適切に焦点を合わせることが困難または不可能になる可能性があり、コンテンツが希望どおりに表示されない可能性があります。」と続けています。

調整可能なヘッドセットの設計を示す特許の詳細

Appleの提案は、「レンズを備えた光学システムを含む可能性のあるヘッドマウントデバイス」に関する詳細を中心に展開している。このアプリケーションには、「[これらの]レンズを使用すると、デバイス内のディスプレイが視覚的なコンテンツをユーザーに表示できるようになります。」と記載されています。

「Apple Glass」の中心窩イメージング

ヘッドセットのより具体的な側面については、「」で検討します。アクティブ光学中心窩形成機能を備えたヘッドマウント デバイスこれは、画像を受け取るレンズについてではなく、ユーザーに最も利益をもたらす方法でそれらの画像を表示することに重点を置いています。

仮想ヘッドセットだけでなく「ユーザーが現実世界の物体を観察できるように透明なディスプレイ」を備えたヘッドセットでは、カメラを使用してその物理環境の現実を中継することができます。この種の「パススルー カメラ」は、見ているものに合わせて独自の設定をインテリジェントに変更できます。

このアプリケーションには、「パススルー カメラは、ディスプレイに表示するために高解像度の画像データをキャプチャする可能性があります」と記載されています。 「しかし、ディスプレイ上のユーザーの視野の周辺に低解像度の画像を表示するには、低解像度の画像データのみが必要な場合があります。」

したがって、ヘッドセットは、装着者が見ているものに応じて、装着者に表示するものの解像度を変更する可能性があります。これには、処理するデータが減り、パフォーマンスが向上し、結果としてバッテリー寿命が短縮されるという利点があります。

この解像度の変更は中心窩イメージングと呼ばれ、ユーザーがどこを見ているかを知る能力に依存します。その一部は頭の物理的な動きから判断できますが、それはシステムがディスプレイのどの特定の部分を見ているのかを認識するのには役立ちません。

AR と「Apple Glass」による視線追跡

「ヘッドマウントデバイスで視線追跡システムを使用すると、デバイスがディスプレイのどの部分をユーザーが直接見ているかを判断できる可能性がある」とAppleは示唆している。

4 つの新しい関連特許出願のうちの最後の出願は、この視線追跡の問題に焦点を当てていますが、デバイス自体の動作に関するものです。 」視線ベースのユーザー インタラクション」では、「ユーザーが目を使用して電子デバイス上に表示されるユーザー インターフェイス オブジェクトと対話する」方法について説明しています。

仮想オブジェクトの位置決めを可能にするためにマッピングされている現実世界の環境を示す特許出願の詳細

そのため、デバイスは「より自然で効率的なインターフェースを提供」できるようになる。これらの方法は、ユーザーがオブジェクトやアイテムを見て選択できるようにするだけでなく、一目見ただけからパディントンの凝視まですべてを解釈できることを提案しています。

このアプリケーションでは、「ユーザーの視線の位置の不確実性と不安定性」によって引き起こされる困難に関する問題について説明しています。

4 つのアプリケーションはそれぞれ、Apple が長年にわたって追求してきた分野およびさらに多くの特許にわたる開発と改良を表しています。これらは、同社が関心を持っている分野に関する洞察であるだけでなく、Apple がハードウェアとソフトウェアを横断することでどのように利益を得ているかを示す例でもあります。