Apple は、「」を可能にするテクノロジーを研究しています。アップルグラスユーザーは、固定された物理的なジェスチャーやタッチ コントロールに拘束されず、代わりに任意のオブジェクトを操作して、ヘッドセットに表示される内容を変更できます。
すでに使用可能ですApple の AR で見るを表示するアプリマックプロまたはiPad Proの上自分の机購入する前に。歩き回ることができますランボルギーニ ウラカン EVO スパイダー車同じように。これらの仮想オブジェクトに対しては何もできません。
見ることはできますが、触れることはできません。それでも問題ありません。それは印象的ですらあります。しかし、としてアップルAR私たちの通常の世界の一部となり、Apple としてそれをあらゆるものと統合するそうしないと問題になります。
AR、特に Apple が Mixed Reality (MR) と呼ぶものでは、iPad Pro を目の前に見ることができるのは素晴らしいことですが、それを使用できる必要があります。仮想オブジェクトを手に取って使用できなければ、AR は 3D 映画と何ら変わりません。
Apple が提案したソリューションは、「追跡された物理オブジェクトを使用した仮想オブジェクトの操作」で説明されています。特許出願2020年1月に提出されたが、今週になって初めて明らかになった。これは、仮想オブジェクトを現実世界の実際のオブジェクトにマッピングできるという点で、現実を真に混合することを示唆しています。
「ヘッドマウンド デバイス (ヘッドセットや HMD とも呼ばれる) など、さまざまな電子デバイスが存在します。」アプリケーションの冒頭では、「ユーザーが完全に没頭できるコンピューター生成現実 (CGR) 環境を表示するディスプレイを備えています。」周囲の物理環境、仮想オブジェクトを含む仮想現実環境、またはその中間の環境に完全に没入した環境。
「周囲の物理環境にある物理オブジェクトを直接操作することはユーザーにとって当然のことですが、CGR 環境の仮想オブジェクトには当てはまりません。」と続きます。
「CGR 環境の一部としてユーザーに提示される仮想オブジェクトと直接対話する手段が欠けていると、仮想オブジェクトが CGR 環境に統合される度合いが制限されます。したがって、ユーザーに直接操作する手段を提供することが望ましいかもしれません」 CGR 環境の一部として表示される仮想オブジェクト。」
おそらく、等身大のランボルギーニの形をした木のブロックを保管するのは現実的ではないでしょう。そしておそらく、Mac Pro の形をしたグラスファイバーを使ってもあまり役に立たないでしょう。しかし、iPad の形や iPad サイズのオブジェクトを使用すると、さらに便利になります。
物理的なオブジェクトを制御することによって仮想オブジェクトを操作し、それに非常に満足している
Appleは現実世界のオブジェクトを「プロキシデバイス」と呼び、ユーザーの周囲に仮想ARを配置するために使用されるのと同じカメラシステムがそれを正確に追跡できると述べている。
「入力は、プロキシ デバイスの入力デバイスを使用して、プロキシ デバイスから受信されます。この入力は、仮想オブジェクトと、内容」と特許出願には記載されています。
「3D座標空間における仮想オブジェクトの位置と向きは、物理環境におけるプロキシデバイスの動きを定義する位置データを使用して動的に更新される」と続けている。
したがって、たとえば長方形のデバイスを持っている場合、AR/MR システムはそれがどこにあるか、どのような向きを持っているか、どの面が上になっているかなどを知ることができます。移動したり回転したりするとそれを認識できるため、AR 画像をどこにオーバーレイするかを正確に認識できます。
「この方法は、仮想オブジェクトと、電子デバイスと物理的に関連付けられていないプロキシデバイスの仮想表現とを含むコンテンツを、電子デバイスのディスプレイ上に提示することを伴う」と続けている。
つまり、あなたの隣に立っている誰かに対して、あなたは白紙の状態で手を振っていることになります。しかし、あなたにとって、それはすべてのコントロールとディスプレイを備えた iPad Pro です。この意味では、この考え方は最近の考え方と似ています。プライバシースクリーン。
この発明はオースティン C. ジャーマーとライアン S. バーゴインの功績とされており、後者は最近特許出願に記載されました。視線ベースのユーザー インタラクション。
Isamu 
Isamu 
Isamu