Sony Interactive Entertainment的許多新專利剛剛公開，揭示了Sony正在嘗試的一些潛在工作，包括PlayStation VR面部跟踪專利，該專利將跟踪面部功能，以為用戶提供更現實的體驗。
第一部分“在虛擬現實環境中為VR用戶集成了跟踪的面部功能” Patent討論了面部跟踪的能力，以使面部運動保持標籤。這包括眼睛和嘴巴的動作，在公司使用它的示例中顯示了一個屏幕上的頭像，模仿了正在處理不使用HMD的另一個用戶的HMD佩戴者的面部表情。
提供了通過頭部安裝顯示（HMD）渲染虛擬現實（VR）場景的方法。該方法包括使用一個或多個眼睛凝視傳感器在HMD的顯示外殼中檢測用戶的眼睛凝視。而且，使用一個或多個在HMD上放置的攝像機捕獲用戶嘴的圖像，其中嘴的圖像包括嘴巴的動作。然後，該方法包括生成用戶的虛擬面。虛擬臉包括從用戶的眼睛目光獲得的虛擬眼動運動以及從上述捕獲的嘴巴獲得的虛擬嘴動作。該方法包括在VR場景中使用虛擬臉顯示用戶的頭像。用戶可以從一個可以訪問查看VR場景的用戶可以查看用戶的頭像，從而可以查看具有用戶虛擬面的頭像。所說的其他用戶可以查看穿著HMD的用戶口腔的面部表情和動作，並且用戶的虛擬面在沒有HMD的情況下顯示。
更重要的是，該公司詳細介紹了專利識別用戶鼻子的能力。是的，我們知道這很奇怪，但是從解釋中，只要它似乎確實有意義，為什麼它們會為用戶提供更現實的體驗。
本披露的以下實現提供了將虛擬現實（VR）視圖渲染到VR場景中，以呈現標題顯示的顯示（HMD），提供了方法，系統，計算機可讀媒體和雲系統。一種方法包括在用戶佩戴HMD時感知用戶鼻子的位置。該方法包括根據所感知的位置識別用戶鼻子的模型。鼻子的模型具有尺寸，該尺寸基於HMD磨損時用戶的鼻子位置。該方法進一步包括將圖像渲染到HMD的屏幕上以呈現VR場景。圖像被增強以包括鼻子模型的鼻子圖像數據。在一個示例中，HMD被配置為捕獲用於生成用戶頭像的面部特徵表達式，並傳達面部表情和/或情感。
因此，本文所述的實施例使HMD系統可以在佩戴HMD時跟踪用戶空間的功能。這些功能可以包括識別用戶鼻子的特徵，並使用該信息在HMD屏幕上至少呈現用戶鼻子的一部分，以查看虛擬現實性內容。通過在觀看場景的圖像中介紹用戶鼻子的圖像，用戶鼻子的圖像或部分圖像將類似於用戶在不佩戴HMD時通常會看到的視圖。因此，用戶的大腦查看圖像將習慣於在場景中至少看到用戶自己的鼻子中的一部分，並且用戶的大腦將自動過濾鼻子的存在。
但是，通過在場景中提供用戶鼻子的鼻子或部分視圖，在查看虛擬現實內容時，用戶可以感覺到更現實的體驗。如果未提供用戶的鼻子，至少部分在圖像中部分，則用戶對虛擬現實場景的外觀或感知將不如自然。因此，通過將此集成到圖像中，在用戶期望看到至少一部分用戶鼻子的位置，對虛擬現實內容的視圖將更加自然，並且通過用戶的自然大腦反應預期，可以過濾鼻子。本文描述的實施例以識別鼻子，表徵鼻子的物理特徵，然後在場景中至少部分地呈現鼻子的模型來介紹鼻子的實施例。
以下是一些圖像，其中一張顯示了在遊戲中如何工作的，中心點是鼻子本身。您可能還會注意到耳機（大概是PSVR）的設計與原始型號略有不同。不要以此為表明這就是新的VR耳機將看起來像Sony繼續支持PlayStation 5。
通過耳機本身跟踪面部表情的能力是一個很酷的主意，並且它已經由其他VR耳機公司對其進行測試。 Veeso值得注意的是，他在2016年發布了一段視頻。不幸的是，他們從未實現Kickstarter的進球，此後不久該項目被取消。 Facebook還在嘗試這個想法。
對於那些活躍的VR用戶的人，這會讓您感興趣嗎？我知道對我們而言，我們可以看到表情的功能變得更加容易使用這種技術。你的想法是什麼？在下面的討論中讓我們知道！
