Beberapa paten baharu oleh Sony Interactive Entertainment baru sahaja diumumkan, mendedahkan beberapa potensi kerja yang Sony sedang bereksperimen, termasuk paten penjejakan muka PlayStation VR yang akan menjejaki ciri muka untuk memberikan pengalaman yang lebih realistik kepada pengguna.
Bahagian pertama daripada“Integrasi ciri muka yang dijejaki untuk pengguna VR dalam persekitaran realiti maya” patent membincangkan keupayaan pengesanan muka yang memantau pergerakan muka. Ini termasuk pergerakan mata dan mulut, dan dalam contoh yang syarikat gunakan ia menunjukkan avatar pada skrin meniru mimik muka yang sama pemakai HMD sedang diproses kepada pengguna lain yang tidak menggunakan HMD.
Kaedah untuk memaparkan pemandangan realiti maya (VR) boleh dilihat melalui paparan yang dipasang di kepala (HMD) disediakan. Kaedah ini termasuk mengesan pandangan mata pengguna menggunakan satu atau lebih penderia pandangan mata yang dilupuskan dalam perumahan paparan HMD. Dan, menangkap imej mulut pengguna menggunakan satu atau lebih kamera yang dilupuskan pada HMD, yang mana imej mulut termasuk pergerakan mulut. Kemudian, kaedah itu termasuk menghasilkan wajah maya pengguna. Wajah maya termasuk pergerakan mata maya yang diperoleh daripada pandangan mata pengguna dan pergerakan mulut maya yang diperoleh daripada imej mulut yang ditangkap. Kaedah ini termasuk mempersembahkan avatar pengguna dalam adegan VR dengan wajah maya. Avatar pengguna boleh dilihat oleh pengguna lain yang mempunyai akses untuk melihat pemandangan VR dari perspektif yang membolehkan melihat avatar yang mempunyai wajah maya pengguna. Ekspresi muka dan pergerakan mulut pengguna yang memakai HMD boleh dilihat oleh pengguna lain tersebut, dan wajah maya pengguna dipersembahkan tanpa HMD.
Lebih-lebih lagi, syarikat itu memperincikan dalam paten keupayaan untuk mengenal pasti hidung pengguna. Ya, kami tahu ia agak pelik tetapi dari penjelasan yang diberikan ia nampaknya masuk akal mengapa mereka melakukannya kerana ia mungkin menawarkan pengalaman yang lebih realistik untuk pengguna.
Pelaksanaan pendedahan semasa berikut menyediakan kaedah, sistem, media yang boleh dibaca komputer dan sistem awan, untuk memaparkan paparan realiti maya (VR) ke dalam adegan VR untuk pembentangan kepada paparan yang dipasang di kepala (HMD). Satu kaedah termasuk mengesan kedudukan hidung pengguna apabila HMD dipakai oleh pengguna. Kaedah tersebut termasuk mengenal pasti model hidung pengguna berdasarkan kedudukan yang dirasai. Model hidung mempunyai dimensi yang berdasarkan kedudukan hidung pengguna semasa HMD dipakai. Kaedah ini selanjutnya termasuk memaparkan imej ke skrin HMD untuk mempersembahkan adegan VR. Imej yang ditambah untuk memasukkan data imej hidung daripada model hidung. Dalam satu contoh, HMD dikonfigurasikan untuk menangkap ekspresi ciri muka yang digunakan untuk menjana wajah avatar pengguna dan menyampaikan ekspresi muka dan/atau emosi.
Oleh itu, penjelmaan yang diterangkan di sini membolehkan sistem HMD menjejaki ciri ruang pengguna, sambil memakai HMD. Ciri-ciri tersebut boleh termasuk mengenal pasti ciri hidung pengguna dan menggunakan maklumat tersebut untuk memaparkan sekurang-kurangnya sebahagian hidung pengguna dalam imej yang dipersembahkan ke skrin HMD untuk melihat kandungan realiti maya. Dengan mempersembahkan imej hidung pengguna dalam imej adegan yang dilihat, imej atau sebahagian imej hidung pengguna akan menyerupai pandangan yang biasanya dilihat pengguna apabila tidak memakai HMD. Oleh itu, otak pengguna yang melihat imej akan terbiasa melihat sekurang-kurangnya sebahagian daripada hidung pengguna sendiri dalam adegan, dan otak pengguna secara automatik akan menapis kehadiran hidung.
Walau bagaimanapun, dengan memberikan hidung pengguna atau pandangan separa hidung pengguna dalam adegan, pengguna boleh merasai pengalaman yang lebih realistik apabila melihat kandungan realiti maya. Jika hidung pengguna tidak disediakan, sekurang-kurangnya sebahagiannya dalam imej, penampilan atau persepsi pengguna terhadap adegan realiti maya akan menjadi kurang daripada semula jadi. Oleh itu, dengan menyediakan integrasi ini ke dalam imej, di lokasi yang pengguna jangkakan untuk melihat sekurang-kurangnya sebahagian daripada hidung pengguna, pandangan ke kandungan realiti maya akan menjadi lebih semula jadi, dan seperti yang dijangkakan oleh tindak balas otak semulajadi pengguna. untuk menapis hidung. Penjelmaan yang diterangkan di sini menyediakan kaedah untuk mengenal pasti hidung, mencirikan ciri fizikal hidung, dan kemudian menghasilkan model hidung untuk persembahan sekurang-kurangnya sebahagiannya dalam adegan.
Dan di bawah adalah beberapa imej, yang menunjukkan bagaimana ini boleh berfungsi dalam permainan dengan titik tengahnya ialah hidung itu sendiri. Anda juga mungkin melihat set kepala (mungkin PSVR) mempunyai reka bentuk yang sedikit berbeza daripada model asal. Jangan anggap ini sebagai petunjuk bahawa ini adalah rupa set kepala VR baharu sekiranya Sony meneruskan sokongan untuknya ke dalam PlayStation 5.
Keupayaan untuk menjejaki ekspresi muka melalui set kepala itu sendiri adalah idea yang cukup hebat dan idea itu telah pun diuji oleh syarikat set kepala VR yang lain. Salah satunya ialah Veeso, yang menerbitkan video pada tahun 2016 yang menunjukkan perkara itu. Malangnya, mereka tidak pernah mencapai matlamat Kickstarter mereka dan projek itu dibatalkan tidak lama kemudian. Facebook juga sedang bereksperimen dengan idea itu.
Bagi mereka yang merupakan pengguna VR aktif, adakah ini sesuatu yang menarik minat anda? Saya tahu bagi kita kita boleh melihat fungsi emote menjadi jauh lebih mudah untuk dilakukan dengan teknologi seperti ini. Apakah pendapat anda? beritahu kami dalam perbincangan di bawah!
