Appleの発明、iPhone用ARマッピングシステム、ヘッドマウントディスプレイの詳細

米国特許商標庁が木曜日に公開した Apple の発明は、インタラクティブなデジタル情報を、ポータブルデバイスの画面に表示される現実世界の環境、特に興味のある地点などのナビゲーション資産に関するデータにオーバーレイする方法を詳述しています。

Apple の拡張現実の発明特許出願「モバイルデバイス上で実環境のビュー内の関心点を表現する方法およびそのためのモバイルデバイス」では、コンピュータで生成されたオブジェクトと実環境の表現の間の相互作用を扱います。特に、この出願では、現実世界の画像をPOI（Point of Interest）情報によって強化する技術について説明されています。

ランドマーク、建物、その他の人気のあるオブジェクトは、Apple 独自のマップを含むマッピングアプリケーションでは一般に POI と呼ばれます。同社はすでに、近くのレストランやガソリンスタンドの地図検索などのファーストパーティ機能に POI データを組み込んでいます。今日の IP は、AR をミックスに追加することで、2 次元マップを超えたアイデアを取り入れています。

実際には、デバイスはまずオンボードカメラでユーザー環境の画像またはビデオをキャプチャし、それらの画像を画面上に表示します。 GPS、コンパス、その他のセンサーデータから収集した地理位置情報を使用して、デバイスは周囲の環境に対する相対位置と方向を決定します。

いくつかの実施形態では、近くのＰＯＩの情報、または記録された現実世界の景色に関連しているかまたは見えると判断されたＰＯＩの情報が、オフサイトサーバーからダウンロードされる。システムは、緯度、経度、高度のデータを使用して、ターゲット POI の相対位置を計算し、それらを画面上に正しく表示します。

POI の位置を決定した後、インタラクティブな注釈を備えたグラフィカルインジケーターがキャプチャされた画像の上にオーバーレイされます。深度検知カメラなどのセンサーを使用して、マーカーを正しい位置に配置することができます。重要なのは、インジケーターがそれぞれの現実世界の対応物に固定されていることです。

たとえば、ユーザーがデバイスを左に動かすと、画面上に表示されている建物がディスプレイの右側に移動して表示されます。このような動きが発生すると、それに応じて POI マーカーが移動し、オブジェクトの持続性が認識されます。

本発明はさらに、これまでに提案されたものよりも直観的なＰＯＩシステムとの対話方法を詳述する。たとえば、ナビゲートしたり、写真撮影以外の操作を実行したりするときに、iPhone を垂直位置に保持することはほとんどありません。デバイスの上部を地面に向かってわずかに傾けた、より自然なポーズでは、POI のしるしが画面外に押し出される可能性があります。

これを補うために、システムはインテリジェントに線を描画するか、POI 注釈を現実世界のオブジェクトに明確に接続する「バルーン」GUI を提供します。このような場合、ユーザーは自然な方法でデバイスを保持したまま、注釈を簡単にタップして追加情報を表示できます。

同様のアクセス方法が、ディスプレイの中央または上部に表示されるPOIについても開示されている。たとえば、POI の画像位置がユーザーの親指から遠く離れている場合、システムは、より簡単にアクセスできる画面領域に POI 注釈を生成する可能性があります。

他の実施形態は、ユーザデバイスが所定の閾値を超えて傾けられたときに、現実世界のビューから、コンパスベースの方向指示器を備えたバニラのＰＯＩリストビューに切り替わるユーザインターフェースを説明する。この特定の表示方法は、一目でわかるナビゲーションに最適です。

Apple の発明は、半透明スクリーンを備えたヘッドマウントディスプレイなどの代替デバイスへの展開についても説明しています。

HMD を使用すると、ユーザーは顔の前に手を伸ばして画面上の注釈を重ねることで、POI オーバーレイを操作できます。位置センサーまたはオンボードカメラは、画面上の GUI 表現を基準とした指の位置を特定し、追加の POI 情報のロードなど、事前構成されたアプリのアクションをトリガーする場合があります。このようなシナリオでは、画面上の低い位置に表示されるバルーン GUI の方が、ほとんどのユーザーにとってより快適な操作モードとなる可能性があります。

Appleの特許出願は、付与されたIPテクノロジー大手が買収したドイツの AR 企業 Metaio によって再割り当てされる2015年に急成長するAR/VR市場への更なる取り組みを目指します。 Apple はここ 1 年で AR に対するますます強い関心を表明してきましたが、同社の野心は iOS 11 での ARKit の発表で初めて明らかにされました。

Apple が近い将来、AR をマップに統合するか、それとも別のファーストパーティアプリに統合する計画があるかはまだわかりません。これまでのところ、Apple は開発者が独自の製品を構築できるコーディングプラットフォームとして ARKit を提供することに満足しているようです。 ARKit は iOS 11 ベータ版の一部として最近リリースされたばかりですが、プログラマーはすでに数多くの印象的なデモプロジェクトを作成しています。見せびらかすソリューションの可能性。

アップルのARポイント・オブ・インタレスト特許出願は 2017 年 4 月に初めて出願され、アントン・フェドソフ、ステファン・ミスリンガー、ピーター・マイヤーが発明者として認められています。