Appleの新しい特許により、MR環境でさまざまなユーザーの手のジェスチャーを解釈できるXRヘッドセット視線制御システムが明らかになりました

2023 年 5 月、欧州特許商標庁は Apple からの特許出願を公開しました。この特許出願は技術的には、コンピュータ生成エクスペリエンスを提供する 1 つ以上の表示生成コンポーネントと 1 つ以上の入力デバイスを備えたコンピュータ システムに関連しています。 1 つまたは複数のディスプレイを介した仮想現実および複合現実体験。実務的には , Appleの特許は、Appleの将来のXRヘッドセットのユーザーに、視線追跡システムからの視線入力を使用して、AR/VR/MR/XR環境でユーザーが見るオブジェクトを制御または移動するためのさまざまなハンドジェスチャーを使用する機能を提供することに踏み込んでいます。 ヘッドセット上またはヘッドセット内のカメラは、深度マッピングを使用して手のジェスチャーを識別します。

Appleは特許背景の中で、少なくとも一部の仮想要素（アプリケーション、拡張現実環境、複合現実環境、仮想現実環境など）を含む環境と対話するための方法やインターフェースは扱いにくく、非効率で、制限があると指摘している。

たとえば、仮想オブジェクトに関連付けられたアクションを実行するためのフィードバックが不十分なシステム、拡張現実環境で望ましい結果を達成するために一連の入力が必要なシステム、仮想オブジェクトの操作が複雑で退屈でエラーが発生しやすいシステムなどです。 、ユーザーに重大な認知的負担を生じさせ、仮想/拡張現実環境でのユーザー エクスペリエンスを損ないます。 さらに、これらの方法は必要以上に時間がかかり、エネルギーを無駄に消費します。 この後者の考慮事項は、バッテリ駆動のデバイスでは特に重要です。

いくつかの実施形態では、コンピュータシステムは、ユーザの手の動き中に維持されるグリップのタイプまたは手の姿勢に基づいて、ユーザの手の動きを区別することができる。 グリップまたは手の姿勢のタイプは、それぞれの手の指の位置、それぞれの手の向き、グリップを形成する手の数、グリップを形成する手の相対的な位置および向き、またはグリップに基づいて区別されます。上記の2つ以上の組み合わせなど。

いくつかの実施形態では、目的地位置またはアンカー位置が選択されると、移動可能な仮想オブジェクトが目的地位置またはアンカー位置に存在する場合、コンピュータシステムは、ユーザの手の動きを、仮想オブジェクトを３つの要素に対して移動させる要求として認識する。手の動き中にユーザーの手が第１のタイプのグリップにある場合の次元環境（およびユーザーの仮想位置または三次元環境の現在表示されているビューの視点に対する）。 ユーザーの手が第 1 のタイプとは異なる第 2 のタイプのグリップを握っている場合、コンピュータ システムは、ユーザーの手の動きを、仮想オブジェクトに対して (および 3 次元環境に対して) 視点を移動する要求として認識します。グリップの。

特許図では、 以下の図２は、ユーザのＣＧＲエクスペリエンスを管理および調整するように構成されたコンピュータシステムのコントローラを示すブロック図である。 以下のコントローラ #110 には、ソフトウェア、ファームウェア、および/またはハードウェアの適切な組み合わせが含まれています。 図７Ａ〜７Ｄは、物理的な手のジェスチャに従ってナビゲーションターゲットを選択し、ナビゲーションターゲットにナビゲートすることを示す。

Apple の特許 以下の図 7E/F/H/I は、3 次元環境 (および視点) に対して仮想オブジェクトを選択的に移動するか、または 3 次元環境 (および 3 次元環境内のすべての仮想オブジェクト) に対して視点を移動することを示しています。次元環境) は、一連のユーザー入力中に維持されるユーザーのハンドグリップに基づきます。

Apple の発明は、2023 年 5 月 24 日にヨーロッパで出願された 163 ページの特許に徹底的に詳しく記載されています。提供されている豊富な詳細をさらに深く知りたい開発者やマニアは、ヨーロッパの特許番号 EP4182799 をチェックしてください。

この特許は、欧州出願を拡張して2021年10月に公開されたAppleの特許出願20210286502に関連している。 Apple は、今回の '502 特許の場合のように、技術者の名前の下に特許を隠すことで、当社のような重要と思われる特許を詮索好きな目から隠しています。 '502 に記載されている発明者は明らかに Apple のエンジニアであり、実際、二次特許にはジョナサン・アイブが記載されています。 これ以上の Apple を手に入れることができますか?

Jack Purcher によって、2023 年 6 月 3 日午前 11 時 25 分に 1A で投稿されました。 特許出願、HMD、スマートグラス +、空中ジェスチャー、ジェスチャー、視線追跡 | パーマリンク | コメント (0)