全系標配滿級防水,OPPO A5 系列新品正式發布

蘋果哭暈在廁所,開發者用 Quest Pro 復刻了 Vision Pro 的 EyeSight
高貴的 EyeSight 有了平替方案
盡管 2023 年剛剛過半,但是要提及 2023 年全球最具影響力的產品,蘋果上個月發布的 Vision Pro 絕對占有一席之地。
強大的硬件、豐富的生態和應用以及人性化的人機交互,讓人印象深刻。而其中最為人津津樂道的功能之一,則是被蘋果稱為有別于市面上其他 VR 頭顯的功能——EyeSight。

在此,我們先簡單地對 EyeSight 做一下回顧:
當有人靠近正配戴 Apple Vision Pro 的使用者時,設備的視區會變透明,讓用戶可以看見這個人,同時走近的人也會看到用戶的眼睛。
當用戶沉浸于空間環境或者使用 app 的時候,EyeSight 會提供視覺線索,讓他人知道用戶在專注做什么。
這項突破性的功能旨在打破傳統 VR 設備的「隔離」屬性,讓佩戴者與周遭的用戶保持連接。
.gif)
然而,蘋果這個美好的愿景在 Vision Pro 高昂的售價和相對遙遠的上市日期面前,注定會讓不少用戶無法在第一時間享受到原生的體驗。
好消息是,高貴的 EyeSight 現在有了一個平替的方案。
國內開發者「放學臻」利用 iPhone、Meta Quest Pro 和自主研發的應用,「實現了」蘋果的 EyeSight 功能。甚至在某種程度上,其體驗超越了蘋果的 EyeSight。
這套組合方案被稱為——Quision Pro。
從演示視頻中,我們可以看到,放學臻將一臺 iPhone 作為外部顯示屏,通過一個物理連接支架與 Meta Quest Pro 進行連接,使用時,即可將佩戴者眼部運動和表情在 iPhone 上呈現出來。

與 Vision Pro 展示的是佩戴者本身的數字化身不同,Quision Pro 可以自定義顯示的圖像,通過簡單地左右滑動即可進行切換。

而蘋果強調的「使用視覺線索來保護隱私」,Quision Pro 也能夠通過在 iPhone 屏幕上劃來進行狀態的切換。

甚至,Vision Pro 中當人物靠近自動切換成透視狀態也有對應的實現。盡管過渡動畫遠不如 Vision Pro 精細,但是這些都可以通過后期優化來解決。

不僅如此,Quision Pro 還做了兩款小游戲。佩戴者可以通過改變頭部的位置來讓空間里的籃球和貓咪朝著某一方向運動,讓我們看到了 EyeSight 這一功能的趣味玩法。

通過各個渠道的信息匯總,我們對 Quision Pro 背后的實現原理也做了一番梳理:
Quision Pro 通過使用 Meta Quest Pro 來進行面部表情跟蹤,然后通過本地無線網絡將數據發送至 iPhone。

iPhone 在獲取到數據之后,渲染出用戶的 3D 視角,借助于 iPhone 的 LiDAR 和 ARKit,將渲染出的眼球視線指向觀看者的眼睛,從而實現在外部看起來無論觀看者在哪個角度都能「被注視」著的效果。

這里還有一個小插曲,盡管 iPhone 在放置于 Meta Quest Pro 前面時遮擋了 Quest Pro 的前置攝像頭,但是 Quest Pro 側面的攝像頭也依然能夠保證其工作時的效果不受影響。

最后還必須介紹一條利好。放學臻表示,這個項目里的 EyeSight 效果利用 Android 的 ARCore 也完全可以實現,并且 Quision Pro 項目在完成調試后將會開源。這意味著如果不考慮侵權的問題,蘋果的 EyeSight 完全是有可能在其他一眾 VR 頭顯上得以實現。
灣里小結
放學臻用簡單的演示向我們還原了蘋果 Vision Pro 的 EyeSight,但是理性來講,這一技術背后的實現還有很多難題需要解決,這也是為何蘋果在 WWDC 會后并沒有提供這項功能的現場體驗——一個成熟的商品需要考慮到各種意外條件下產生的不良影響。
但是我們很高興看到已經開發者已經走出了第一步,并且為行業其他的產品實現提供了有價值的思路。相信隨著蘋果 Vision Pro 開發工具包的發布,我們會看到越來越多有趣和有價值的應用。
主筆:陳述 / 深圳灣
編輯:曉月 / 深圳灣