PlayStation VRフェイシャル追跡特許は、より現実的な体験を提供することを目指しています

Sony Interactive Entertainmentによる多くの新しい特許が公開されたばかりで、Sonyが実験している潜在的な作業のいくつかを明らかにしました。

の最初の部分「仮想現実環境でのVRユーザー向けの追跡されたフェイシャル機能の統合」Patent顔の動きのタブを保持する顔の追跡の能力について説明します。これには、目と口の動きが含まれ、同社が使用する例では、HMDを使用していない別のユーザーに処理されるHMD着用者と同じ顔の表情を模倣している画面上のアバターが表示されます。

ヘッドマウントディスプレイ(HMD)を介して表示可能な仮想現実(VR)シーンをレンダリングする方法が提供されます。この方法には、HMDのディスプレイハウジングに廃棄された1つ以上の眼の視線センサーを使用して、ユーザーの視線の検出が含まれます。また、HMDに廃棄された1つ以上のカメラを使用してユーザーの口の画像をキャプチャします。口の画像には、口の動きが含まれます。次に、この方法には、ユーザーの仮想面を生成することが含まれます。仮想面には、ユーザーの視線から得られた仮想眼球運動と、口のキャプチャされた画像から得られた仮想口の動きが含まれます。この方法には、VIRTUAL FACEでVRシーンのユーザーのアバターを提示することが含まれます。ユーザーのアバターは、ユーザーの仮想面を持っているアバターの表示を可能にする観点からVRシーンを表示するためにアクセスできる別のユーザーが閲覧可能です。 HMDを身に着けているユーザーの口の表情と動きは、他のユーザーが閲覧可能であり、ユーザーの仮想面はHMDなしで提示されます。

さらに、会社は特許の中でユーザーの鼻を識別する能力を詳述しているということです。ええ、私たちはそれがかなり奇妙であることを知っていますが、説明からは、ユーザーにとってより現実的な体験を提供する理由について少し意味があるように思えます。

現在の開示の以下の実装は、メソッド、システム、コンピューター読み取り可能なメディア、およびクラウドシステムを提供し、仮想現実(VR)ビューをVRシーンに表示して、ヘッドマウントディスプレイ(HMD)にプレゼンテーションするためのビューを提供します。 1つの方法には、HMDがユーザーが着用するときのユーザーの鼻の位置を検知することが含まれます。この方法には、感知された位置に基づいて、ユーザーのノーズのモデルを識別することが含まれます。 HMDが摩耗したときにユーザーの鼻の位置に基づいた寸法を持つ鼻のモデル。この方法には、VRシーンを提示するためにHMDの画面に画像をレンダリングすることがさらに含まれます。画像は、鼻のモデルからの鼻の画像データを含めるように拡張されています。一例では、HMDは、ユーザーのアバター面を生成し、表情や感情を伝えるために使用される顔の特徴表現をキャプチャするように構成されています。

したがって、本明細書に記載されている実施形態により、HMDのシステムがHMDを着用している間、HMDのシステムがユーザースペースの機能を追跡できるようにします。機能には、ユーザーの鼻の特性を識別し、その情報を使用して、仮想現実性コンテンツを表示するためにHMDの画面に表示された画像にユーザーの鼻の少なくとも一部をレンダリングすることが含まれます。表示されているシーンの画像にユーザーの鼻の画像を表示することにより、ユーザーの鼻の画像または部分的な画像は、HMDを着用していないときにユーザーが通常見ているビューに似ています。そのため、ユーザーの脳視聴画像は、シーンでユーザー自身の鼻の少なくとも一部を見ることに慣れており、ユーザーの脳は鼻の存在を自動的に除外します。

ただし、シーンでユーザーの鼻またはユーザーの鼻の部分的なビューを提供することにより、ユーザーが仮想現実コンテンツを表示する際に、より現実的なエクスペリエンスを感じることができます。ユーザーの鼻が少なくとも部分的に画像に提供されていない場合、ユーザーの見た目や仮想現実シーンの認識は自然よりも少なくなります。このように、ユーザーが少なくともユーザーの鼻の一部を見ることを期待している場所で、この画像への統合を提供することにより、仮想現実性コンテンツへのビューはより自然になり、ユーザーの自然な脳反応によって予想されるようになります鼻を除外します。本明細書に記載されている実施形態は、鼻を識別し、鼻の物理的特性を特徴付ける方法を提示し、少なくとも部分的にシーンでプレゼンテーションのために鼻のモデルを生成する方法を提示します。

以下はいくつかの画像です。これがゲームでどのように機能するかを示しています。センターポイントは鼻そのものです。また、ヘッドセット(おそらくPSVR)が元のモデルとはわずかに異なる設計を持っていることに気付くかもしれません。 SonyがPlayStation 5にサポートを継続した場合、これが新しいVRヘッドセットがどのように見えるかを示していることを示しないでください。

ヘッドセット自体を介して表情を追跡する機能は非常にクールなアイデアであり、他のVRヘッドセット企業によってすでにテストされていたアイデアです。特に、2016年にそれを示す2016年にビデオを公開したVeesoです。残念ながら、彼らはKickstarterの目標を達成することはなく、プロジェクトはまもなくキャンセルされました。 Facebookはこのアイデアを実験しています。

アクティブなVRユーザーである人にとって、これはあなたに興味を持っているものですか?私たちは、この種のテクノロジーで実行するのがはるかに簡単になるEmoteの機能を見ることができることを知っています。あなたの考えは何ですか?以下の議論でお知らせください!

ジェームズ・ララ

ジェームズのゲーマーであるジェームズは、過去10年間MP1stで働いており、自分が好きなことを正確に行い、ビデオゲームについて書いて、それを楽しんでいます。 90年代のゲームで育ったのは、NESの時代から彼のDNAにありました。ある日、彼は自分のゲームを開発したいと考えています。