Apple、VR ヘッドセットで使用する 360 度マルチカメラビデオを改善する方法を検討

Apple は、VR ヘッドセット用の 360 度ビデオコンテンツを改善する方法を検討しています。これは、ビデオから多方向の画像データをつなぎ合わせて、現在のステッチアプリやエンコーダが生成できるよりも歪みが少ないように表示する方法を考案することです。

米国特許商標庁が木曜日に発表し、当初は2017年2月15日に提出された。特許出願「球面投影による歪みを補正するための正距円筒オブジェクトデータの処理」というタイトルのこの記事は、ビデオを結合する際のエラーと問題を修正することを目的としています。

提出書類では、ビデオは、同じ場所を指す複数のカメラを使用することや、より最近の開発として、物の全側面を映すことができる全天球ビデオを生成するカメラを使用することなど、複数の視点から被写体やシーンを撮影できる方法で作成されると記載されています。あるシーン。手持ちビデオの場合、またはカメラの位置や視点を変更するショットの場合、画像はシーンに組み込むことができる大量の追加データを提供する可能性があります。

「現代のコーディングアプリケーションの多くは、そのような全方向または多方向の画像コンテンツを処理するように設計されていない」と出願書類には述べられており、アプリケーションが画像データが「フラット」であるか、単一のビューからキャプチャされたものであることを前提に設計されていることを示唆している。つまり、このようなアプリケーションは、この種のビデオを処理するときに発生する可能性のある歪みを考慮していないため、画像コンテンツの冗長性を認識できず、非効率になる可能性があります。

つまり、エンコーダはビデオをピクセルブロックに分割し、ブロックごとに、エンコーダが参照ピクチャ内のシーンに関して持つ可能性のある他のデータと比較します。エンコーダは、検索ブロックと参照データの予測検索を使用して、ピクセルブロックに対してさまざまなアクションを実行して、内部で使用される形式で視聴者により適切に見えるようにすることができます。

たとえば、VR ヘッドセットを装着した人が視聴できるように、その形式を念頭に置いて作成された全天球ビデオを作成できます。同時に、ユーザーが見ているものと同じビューを 2 番目のモニターにライブで表示できますが、変更が加えられているため、通常の「フラットな」一眼視点から見たように見えます。球面ビューで正しく見えるために必要な歪み。

また、同じシステムで修正を加えて全天球ビデオで使用できるようにすることで、複数の平面ビューから全天球画像を作成することもできます。

Apple は毎週大量の特許出願を行っていますが、同社の製品やサービスに採用されているコンセプトは比較的少数です。 USPTOへの申請は、そのアイデアが将来の消費者向けデバイスに登場することを保証するものではありません。

申請書のコンセプトには、すでにいくつかの優れたアプリケーションが利用可能である可能性があります。まず、ユーザーが次の方法で録音できるようになります。360度カメラビデオを適切につなぎ合わせ、選択した領域からクリップを作成し、最初から「フラット」カメラで記録されたかのように見えるように変換します。

2 つ目は VR 用で、全天球ビデオを作成するためと、ヘッドセットを装着したユーザーが見ているものを観客が見るための両方に使用されます。 360 度カメラで作成されたビデオは、将来 VR ユーザーにとって主要なコンテンツソースになる可能性がありますが、そのようなビデオの撮影による歪みやアーティファクトを修正できる機能があれば、コンテンツはより視聴しやすいものになるでしょう。

アップルはこれまで、噂のしばらくの間、独自の VR ヘッドセットの開発に取り組む予定です。関連している特許提出書類レポートを強化します。ソフトウェア関連のARおよびVRの動きにもかかわらず、同社はまだ独自のヘッドセットを製造することを直接示していない。