「Apple Glass」は任意の表面に投影された仮想キーボードを使用できる

Apple は、表面に投影された仮想キーボードを含む、拡張現実メガネまたはその他のヘッドマウント デバイスでキーボードを使用する複数の方法に取り組んでいます。

クパチーノのテクノロジー大手は、少なくとも 1 つのヘッドマウント デバイスを開発していると考えられています。それはおそらくアップルARいわゆる「」のようなヘッドセットやARグラスアップルグラス」もありますが、兆候仮想現実デバイスも開発中であるとのこと。

Appleは、10月15日に公開された「ヘッドマウントデバイスによるキーボード操作」というタイトルの特許出願で、ユーザーがARグラスまたは同様の製品でキーボードを使用できるいくつかの異なる方法を詳しく説明している。

この特許は、ヘッドマウントデバイスが何を必要とするかについての背景を示しています。たとえば、目の前にレンズがあり、複数のカメラが装備されているヘッドセットが考えられます。ディスプレイレンズは視覚を補正する光学特性を持ち、物理環境を排除したり、その上に情報を重ね合わせたりすることができます。

テキストを入力する必要がある場合、ユーザーは実際の物理キーボードまたは「ディスプレイを介したその表現」のいずれかでこのヘッドマウント デバイスを使用できます。キーボードに入力されたテキストは、ディスプレイのレンズを通してユーザーの視野に表示されます。

しかし、最も興味深いのは、Apple がここで検討しているテキスト入力の代替方法です。これには、タッチセンサー面に投影された仮想キーボードや、机やテーブルトップなどの平らな面に投影されたキーボードが含まれる場合があります。

AR ヘッドセットを追跡デバイスと併用すると、あらゆる表面を仮想キーボードとして使用できるようになります。クレジット: Apple

「ヘッドマウントデバイスは、表面に対するユーザーの手の配置に基づいて仮想キーボードを提供できる」と特許には記載されており、デバイスは表面上の手の位置によってキーボードがどこにあるべきかを検出できると付け加えられている。

これらのいずれの場合でも、ユーザーの手に近接して配置された追跡デバイスは、ハンド追跡システム、慣性測定ユニット、または力検出センサーを使用して AR デバイスにテキストを送信する可能性があると Apple は指摘しています。

「キーボードの操作が複数の検出に基づいて検出されるように、上記の組み合わせを提供できることが理解されるであろう」と特許には記載されている。

さらに、これらの追跡センサーにより、信号に依存せずにキーボードを機能させることができる可能性があります。言い換えれば、タイピングはヘッドセットによって検出され、事実上電子機器を内蔵しないキーボード、または表面に投影された仮想キーボードが可能になる可能性があります。

投影されたキーボードの場合、Apple は、入力時に実際のキーを見やすくするためにユーザーの手を透明にすることができると述べています。テキストの編集に関しては、手のジェスチャーやその他の入力を使用してテキストを選択し、変更を加えることができます。

ユーザーがキーボードを見やすくできる手の透明効果の図。クレジット: Apple

さらに、この特許は、ユーザーがアップルペンシルまたは別のスタイラスを使用して、平らな面に描画したり注釈を付けたりできます。

この特許には、Paul X. Wang、Keith K. Hendren、Alex J. Lehmann が発明者として記載されています。ワン氏は、以下に関連する Apple の特許に取り組んできました。ガラスキーボード;ヘンドレンが取り組んだのは、MacBookのキーボードテクノロジー;そしてリーマンは発明者として指名されました曲げられるMacBookの特許。

Apple は毎週多数の特許出願を行っており、そこに記載されている技術が市場に投入されるという保証はありません。同様に、特許出願には、そのような機能がいつ実現するかについては何も示されていません。