Apple Pencilは将来のiPadでホバーベースのジェスチャを搭載する可能性がある

将来の iPhone と iPad は、ユーザーがディスプレイに触れなくても動作する可能性があり、Apple は、デバイスに触れることが望ましくない状況で、指や Apple Pencil を画面に近づけることで選択やジェスチャーを可能にする可能性を模索しています。

タッチスクリーンは、その名前が示すように、ディスプレイに触れることによって操作され、大多数のスマートフォンやタブレット ユーザーにとって非常に簡単なシステムです。ユーザーが料理をしていて手が汚れている場合など、画面に触れることを避けるべき場合もありますが、Siri などのデジタル アシスタントの機能向上はこの問題を軽減するのに役立つかもしれませんが、ユーザーとの直接対話には太刀打ちできません。指を使った装置。

ディスプレイとの継続的な接触に依存しない強化されたジェスチャを作成する可能性もあります。タッチに合わせて画面上で指をホバリングできる機能により、まったく新しいタイプのジェスチャやコントロールが実現する可能性があります。

ただし、ホバーベースのインターフェイスは、限定的にはしばらく存在していましたが、従来のタッチ インターフェイスとはシームレスに動作しません。事実上同じ媒体を通じて 2 つの異なるタイプのインターフェイス コントロールを学習すると、一部のユーザーが混乱する可能性があります。

火曜日に米国特許商標庁から Apple に付与された、特許「近接ベースおよび接触ベースの入力を介してユーザー インターフェイス オブジェクトと対話するためのデバイス、メソッド、およびユーザー インターフェイス」では、これらの領域の両方の問題を解決することを目的としています。

Apple のソリューションでは、タッチセンサー面上のスタイラスや指などの入力オブジェクトの近接を検出するため、およびディスプレイとの接触の強度を検出するために 1 つ以上のセンサーが使用されます。

特許が示唆していることは、スタイラスを検出することで何が読み取れるのか、またそれが位置決めのために何を解釈するのかを示唆している

ホバリングアイテムを検出することは新しいことではないが、Apple の特許は、要素の存在を検出するというよりも、ユーザー インターフェイスが要素とどのように対話できるかという点に関して誤りがある。この場合、スタイラスまたは指がディスプレイからどのくらい離れているか、スタイラスの角度、位置、および特定の強さまたは圧力でディスプレイに接触するタイミングが決まります。

現在の状態と実行された以前のアクションに応じて、インターフェイスは反応し、さまざまなオプションをユーザーに表示できます。

たとえば、インターフェイスは、スタイラスがディスプレイの特定の範囲内にある場合にのみユーザーのアクションを考慮することができ、これにより、スタイラスがホバリングしている画面領域のユーザーのセクションに対応するアイコンがディスプレイ上に表示されるように促すことができます。その上。追加されたばかりのインターフェイス要素をスタイラスで押すと、他のアクションがトリガーされる可能性があります。

押す強さや圧力はさまざまなアクションを意味すると解釈することもでき、より強く押すと別の選択としてカウントされたり、一部の iPhone モデルで提供される 3D Touch のようにオプションをさらに変更したりできます。押し続けた時間の長さを測定して入力に使用することもでき、長押しすると、短いタップや押した場合とは異なるアクションを開始できます。

ホバーメカニズムを使用して画面を操作するためのさまざまな状態の例

この特許はまた、選択に使用される画面と同様の接触により、インターフェイス オブジェクトがどのように動き回ってスタイラスまたは指のホバリング位置を追跡できるかについても示唆しています。スタイラスまたは指のホバリング位置の監視を継続することにより、ユーザーはジェスチャーとしてより複雑なアクションを実行できるようになります。

たとえば、ユーザーは指で掴む動作を使用して文書からテキストや画像を切り取り、指を束ねたまま、画面上のカーソルを移動させながら手全体を文書の別の部分に移動することができます。手がホバリングしている場所に基づいて、アイテムを配置できる場所を示します。ユーザーは、動作を逆にして切り取ったコンテンツを解放し、カーソルがあった場所に貼り付けるか、スタイラスを近接範囲から引き出すことができます。

Apple はまた、同様のホバリング機構を使用して、位置インジケーターの視覚的特性を変更したり、ユーザーに範囲を示したり、インターフェイス自体の要素を変更したりできる可能性があることを示唆しています。

特許の公開は、Apple が特許に記載されているコンセプトを将来の製品やサービスに導入することを保証するものではありませんが、同社の研究開発努力にとって興味深い分野を示すものではあります。

Apple がホバーベースのインタラクションを検討したのはこれが初めてではありません。とりわけ、2016 年の特許は、インライン近接センサーキーボードとトラックパッドの近く、2010 年の 1 つは特にタッチスクリーンに関連したもの近接センサー。

Appleはまた、どのように使用できるかを検討しています力感知手袋2019 年の特許では、ジェスチャーや物理的な物体の握り方を検出するなどして入力を強化します。このテーマの続きとして、2019 年の別の特許出願では、指デバイスの装着が提案されています。軽く絞ったユーザーが押したときに指の側面が反応し、タッチスクリーンで入力するときにユーザーに触覚的なフィードバックを与えます。