アップルARHomePod、HomePod mini、または AirPods Pro ですでに使用されているように、空間オーディオを機能させることができますが、コンパクトなデバイスにも録音できます。
私たちは AR を視覚的なメディアとして考えるのが依然として正しいかもしれませんが、Apple は再び体験全体のオーディオ面を研究しています。前回の調査に引き続きオーディオサウンドを3Dにする、現在、これを実現するためのより便利な方法を研究中です。
「オーディオと測距コンポーネントを備えたオーディオシステム」は、新しく付与された特許それは、最小限の機器で正確な 3D サウンドを模倣する方法に関係しています。
「仮想空間で観察者に音像を再現する既存の方法では、音源定位を検出された音に依存するために、実際の空間の周りに分散されたマイクが互いに間隔をあけて設置されなければなりません」とAppleは述べています。
「したがって、そのような方法では、単一のコンパクトなマイクロホンアレイを音源位置特定に使用することはできず、そのような方法の機器および設置コストは多額になる可能性がある」と研究書は続けている。
また、録音のために一連のマイク全体を互いに間隔をあけて配置すると、それらを移動するのに時間がかかるという問題もあります。 Apple が望んでいるのは、ポータブルな録音と再生にも適した、よりシンプルなシステムです。
Apple AR では、体験をリアルに感じるためにオーディオが不可欠であるため、これは特に重要です。 「仮想現実および拡張現実環境には、仮想空間内でコンピュータが生成した音源である仮想音源を含めることができます」と Apple は述べています。
コンパクトな記録装置の構成を示す特許の詳細
「仮想空間は実際の空間にマッピングできます」と続きます。 「たとえば、ユーザーが部屋でヘッドフォンを着用すると、その同僚が実際には別の部屋にいるにもかかわらず、ヘッドフォンはあたかもユーザーの目の前にいる同僚の声であるかのように音声をユーザーに再生することができます。」
「ユーザーが部屋の中を移動すると、たとえばユーザーが5歩前に歩くと、再生されるサウンドが変化する可能性がある」と特許には記載されている。
仮想オブジェクトの動きや位置変更を視覚的に示すには、記録がソースの位置を正確に識別できなければなりません。 Appleの特許には、「位置が特定されると、あたかもユーザーがいる部屋の同じ場所から音が聞こえているかのように、再生音の定位を特定する方法で、ユーザーに対して録音を再生することができる」と記載されている。
一連のマイクの必要性から逃れることはできないかもしれないが、この特許は、Apple が「深度キャプチャデバイス」と呼ぶものによってそれらを補うことを提案している。この 2 つが「点群とローカル音場を検出」でき、プロセッサがそのデータから「グローバル音場を再構築」できれば、「仮想現実環境をユーザーにレンダリング」できるようになります。
言い換えれば、仮想同僚が左側に 5 フィートの距離にいることを把握するためにどのようなシステムが使用されたとしても、Apple AR オーディオは、仮想同僚がその方向に近づいているかのように音声を再生することができます。
鍵はこの深度捕捉装置にあります。この特許では、考えられるあらゆるデバイスについて説明していますが、焦点はカメラに集中しています。
「たとえば、カメラ アレイは 2 つ以上のカメラを備えた立体システムである可能性があります」と特許には記載されています。 「複数のカメラが互いに隣接したり、互いに間隔をあけて同じ空間を見たりすることができます。」
「各カメラは、異なる視点から同じ空間を検出できるため、各カメラからの画像データを分析することによって、カメラアレイ106からの距離、および画像内の異なる点および/または物体を決定することができる」と続けている。 。
この特許は、このオーディオをユーザーに再生する方法についても触れていますが、主に、最初にオーディオを正確に録音、つまり中継することが重要です。
オーディオを再生して本格的な 3D 空間サウンドを作成
「例えば、音を発する物体が視野内で後方に移動するとき、たとえば捕捉装置の位置から遠ざかるとき、音声信号の遅延とゲインを調整して、生成された音に対応する仮想音を[ ］仮想環境内のユーザー」と Apple は述べています。
「同様に、ユーザーは仮想現実環境内を移動して、仮想音源に対する視点を変更できます。」と続きます。「...そして、ユーザーが移動すると、オーディオ信号の遅延とゲインが変化する可能性があります。」仮想サウンドが正しい位置から来ているようにレンダリングするように調整されました...」
この発明は、Martin E. Johnson と Jonathan D. Sheaffer という 2 人の発明者によるものです。どちらも、以前は空間オーディオを記録するための別の特許として認められていました。通常より少ないマイク。
Apple のすべてのニュースを常に最新の状態に保ちますホームポッド。 「ねえ、Siri、AppleInsider を再生して」と言うと、最新の AppleInsider Podcast が得られます。または、あなたに尋ねてくださいホームポッドミニ代わりに「AppleInsider Daily」にアクセスすると、ニュース チームから直接最新情報を直接聞くことができます。また、Apple 中心のホーム オートメーションに興味がある場合は、「Hey、Siri、HomeKit Insider を再生して」と言えば、すぐに最新の専門ポッドキャストを聞くことができます。
