今天小編分享的科技經驗:喬布斯18年前神預言Vision Pro!深扒13個背後故事,國内真機上海見,歡迎閲讀。
智東西(公眾号:zhidxcom)
作者 | 徐珊
編輯 | 雲鵬
蘋果 Vision Pro 頭顯的特别之處,遠不止發布會上 40 分鍾介紹的内容。
智東西 6 月 26 日報道,半個月前,蘋果公司用其首款空間計算頭顯 Apple Vision Pro 點燃了整個 XR 賽道的熱情。在短短的 40 分鍾内,蘋果簡要介紹了 Vision Pro 的一些基礎功能和應用場景。随後,蘋果在其官網上線了多項開發者課程,從空間設計、互動等多個方面更加具體的介紹了 Vision Pro 内多項有趣的設計。同期,有關 Vision Pro 更多台前幕後,不為人知的細節也随着爆料逐漸呈現在大家面前。
▲蘋果多項開發者課程
喬布斯是如何看待頭顯類產品的?蘋果是如何學會 " 讀心術 " 的?國内誰會率先一睹 Vision Pro 的真容?有關 Vision Pro,我們挖到了 13 個鮮為人知的細節,揭開有關 Vision Pro 台前幕後的事。
一、喬布斯再次預言成功,稱頭顯產品是一個 " 奇迹 "
随着近期人們對蘋果在 AR 領網域的考古熱漸起,我們發現蘋果 " 教主 "18 年前就曾設想過 " 視頻耳機 " 的產品出現,并且稱之為 " 奇迹般的產品 "。
2005 年,喬布斯曾在 D3 的采訪中提及盡管 PS 是非常好的遊戲機,但是不能作為音樂播放器,也不能裝在口袋裏。
▲喬布斯提及有關 " 視頻耳機 "
然後他設想了一種新的產品思路:" 我可以裝在口袋裏随身攜帶,戴上後可以給我讓我看到家裏 50 寸離子電視同樣能看到的東西。" 他在采訪時還提到,產品發布後,你既可以擁有優秀的音頻體驗,還能獲得巨幕觀影體驗。
如今的 Vision Pro,不但能夠提供多樣的空間音頻體驗,而且還能提供環繞式巨屏觀影,也是對喬布斯曾經的設想,回報出一份答卷。
二 、健身場景三大應用尚未亮相,蘋果偷偷藏一手?
在 The information 的最新報道中,有不少蘋果内部人士以及體驗過產品的媒體給出更為細致有關 Vision Pro 的内部信息。至少三位消息人士提到一些蘋果正在準備有關健身場景的内容,健身場景曾是蘋果重點打造的場景之一。但蘋果卻沒有在發布會上披露任何 Vision Pro 健身場景的有關信息。
據悉,蘋果還曾專門為 Vision Pro 研發了三款健身軟體。一款是冥想軟體,随着呼吸節奏的調整,有規律律動的樹葉會漸漸膨脹成球形,最後包圍着用户。另一款則是太極應用,該應用程式将指導用户練習太極。還有一款是瑜伽健康應用程式,頭像将通過向下的攝像頭觀察用户胸部來測量呼吸的程度和身體的變化。
據悉,蘋果内部至少有三個小組成員正在為 Vision Pro 的健身場景所努力,如與耐克等運動品牌聯名打造健身運動、如何研發出更适合出汗、高強度鍛煉的面墊、甚至是如何在騎固定自行車時佩戴 Vision Pro 并與頭顯内容互動等。
▲蘋果頭顯擁有一個外部電池組
但如今,Vision Pro 的介紹中并未展示健身場景的相關應用,甚至是蘋果自身研發的三款健康軟體也尚未亮相。對其原因,蘋果員工内部也有諸多猜測。一位蘋果頭顯前團隊成員表示,由于頭顯需要外部電池組,并有電線與之相連,所以蘋果可能并不公開讨論一些健身案例。同時,頭顯的前置玻璃螢幕可能比較脆弱,無法承受家具或牆壁的撞擊。此外,他認為也有可能是此類應用程式的内容也根本沒有準備好。
三、Persona 其實是 " 閹割版 " 功能?Vision Pro 尚未實現全身追蹤
相信有不少人和我一樣,曾為蘋果的 Persona 功能感到驚豔。打開軟體,分分鍾 Vision Pro 就能幫你安排一個栩栩如生的寫實虛拟人上線。但根據媒體的最新爆料,我們現在看到的 Persona,并不是蘋果最初設想的版本。在蘋果的設想裏,虛拟人應該同樣是全身展示的。
▲蘋果頭顯 Persona 功能
據三位參與該設備工作的人士透露,蘋果曾聘請了 Weta FX 等特效公司的人員來共同開發 " 在場 " 功能,為用户打造一個栩栩如生的面部形象,甚至他們計劃在眉毛上安裝頭戴式攝像頭,以更準确地描繪一個人的面部表情。
據多名參與該設備開發的人士稱,盡管該方案最終并未被采用,但是 Persona 最初的設計版本也和如今不同。在 Persona 的最初設想裏,Vision Pro 需要實現全身追蹤,這也是 Vision Pro 擁有兩個朝下攝像頭的原因之一。但由于目前尚未實現 Vision Pro 全身追蹤方案,因此,現階段,Persona 僅看到用户的上半身。
▲蘋果頭顯前部有兩個向下的攝像頭
在發布會的相關活動環節,蘋果公司發言人曾在今年早些時候告知開發者,全身追蹤功能不會在今年上線。
四、将頭顯帶上天,Vision Pro 或擁有飛行模式
除了 The information 挖到了來自蘋果内部的一手消息,外媒 MacRumors 也在 visionOS 1.0 測試版中發現,該設備的作業系統可能有一個飛行模式選項,讓用户可以在飛行期間使用。
系統内部檔案中的一個注釋提到如果您在飛機上,則需要保持旅行模式打開才能繼續使用 "Apple Vision Pro"。該注釋還提到它還會提示用户需要 " 在旅行模式下保持原地不動 ",避免佩戴者在佩戴頭顯時四處走動,打擾到坐在他們旁邊的人。
在檔案中,visionOS 中的其他文本指出 " 某些感知功能将被關閉 ",這或許表明該設備在飛行模式下可能不會使用其某些傳感器來進行空間感知,部分功能受限。
五、蘋果學會了 " 讀心術 "?攝像頭正在猜測你的心
在發布會上,蘋果展示了一項略顯神奇的功能:當你看向界面中的任意圖示時,界面就能精準呈現出你看的圖示被選中,并随着你的注視時間呈現子菜單或者進入等多種變幻方式。
蘋果認為眼睛意圖(eye intention)是非常重要且敏感的信息。" 眼睛是空間體驗的主要瞄準機制,所有的界面都會對您的視線做出反應。我們都能通過觀察眼睛,來瞄準界面中的任意元素,無論它有多遠。" 蘋果設計團隊的員工在開發者課程中説。
比如説,當你長期注釋着某個喜愛的照片時,眼睛會轉動的很快,系統就會知道你對它十分感興趣,時刻準備着向你展示更多的信息。再如説,當你使用停留控制功能時,你可僅用眼睛選中某個内容。
▲眼神視線變化直觀在圖示上展示
當然,蘋果也提到,被人看透的 " 眼睛意圖 " 是非常敏感的信息,因此在處理數據的時候,保護隐私是首要任務,用户主動選擇相應的功能後,系統才會向你展示新的信息。
蘋果在眼動技術方面的積累多年。在和眼動追蹤技術相關的廠商交流後,我們了解到蘋果曾利用 iPhone 的眼動技術在廣告領網域獲取相應的信息,比如説,通過用户停留在手機界面的某個產品上的目光時長,推測其用户喜好,并将其記錄。
除此之外,蘋果研發人員 Crispin 也在 Twitter 上曾爆料稱,其在蘋果頭顯團隊工作多年,主要攻克的方向就是通過監測身體和大腦的數據,在沉浸式體驗中能夠準确識别用户的精神狀态。
由此可見,你的眼睛正在悄悄出賣你,蘋果正在通過其積累多年的眼動技術來讀懂你的心。
六、為什麼圖示都是圓形邊框?蘋果:為了保護雙眼
盡管不少產業人士都能預測眼動追蹤技術是頭顯的關鍵互動方式之一,此前業内也有高端頭顯搭載了眼動追蹤模組,但是相較而言,蘋果的眼動識别似乎精準度更高,其互動玩法也更多樣。
在蘋果的開發者課程中,設計團隊負責人曾反復提到一句話 " 要注意,眼睛目标的元素所需要的最小點為 60pt(UI 設計部門,邏輯像素點)。" 這也隐約向我們透露蘋果頭顯 UI 設計的最小值。
▲選擇圓矩形圖示設計
同時,在設計圖示時,蘋果還温馨提醒設計者,要使用圓形、藥丸形、或者圓角矩形等設計方式。因為當圖示時,邊緣鋒利的形狀會讓用户的眼睛聚焦在鋒利的邊框上,從而降低眼睛的精準度,而且還會造成用眼疲勞。
可以看出,蘋果也是從多方面觀察你的注視動向,并且将每一次注視的力量發揮到關鍵之處。
七、Meta 謀劃多年的虛空鍵盤竟給蘋果搶先了
除了眼動技術之外,手勢也是蘋果頭顯的關鍵互動方式之一。人們對虛拟鍵盤的設想,早在各類科幻電影中頻頻出現。蘋果也在發布會通過一閃而過的畫面展示了虛拟鍵盤已經從科幻電影走向現實。
▲ Meta 研究如何通過肌電手環實現互動
當 Meta 正在研究如何通過肌電手環,實現虛拟打字場景的時候,蘋果已經通過裸手互動和虛拟鍵盤相配合的方式,實現虛拟打字。當然,蘋果自己也提到設計相關場景時,要考慮到 " 輸入的時間太長,手會很累 " 的問題。
在使用虛拟鍵盤的時候,當用户的手在虛拟鍵盤上時,虛拟鍵盤的按鍵會顯示一個懸停狀态和一個高亮狀态。随着手指越靠近按鍵表面,按鍵表面亮度會越亮。
▲蘋果實現虛拟鍵盤輸入
在演示視頻中,蘋果也直接提到了虛拟鍵盤的弊端——觸感缺失。" 我們要通過用音量、圖形和效果變換來彌補出現的頭顯效果。" 蘋果設計團隊的員工説道。
他還提到當手指接觸到虛拟鍵盤按鍵時,虛拟鍵盤的變化速度會特别快,并伴随着相應的空間音效。這些變化能夠幫助用户彌補缺少的觸覺信息,讓用户和虛拟鍵盤之間的互動可具有可靠感和反饋感。
當然,除了虛拟鍵盤本身以外,Vision Pro 也支持外部鍵盤接入配合使用的方式。從現有的視頻效果來看,蘋果的虛拟鍵盤背後,既有眼動追蹤和實時渲染的技術支持,同樣也有蘋果在手勢互動精準度的 " 苦功夫 ",以及蘋果在整個用户體驗層面的多重優化。
八、眼睛竟成 " 放大鏡 ",眨眨眼就自動放大圖片
當眼動互動和手勢互動相結合的時候,蘋果發明了不少新玩法,其中之一就是将眼睛變成 " 放大鏡 ",只需要動動雙眼,結合縮放手勢,你就可以直接放大影像的某個 角落。
" 将視線方向與手勢相結合,我們可以創建精确且令人滿意的互動,這在其他平台上是不可能的。" 蘋果設計團隊發言人驕傲地説道。
他解釋到,當你看向圖片的某個位置,并做出縮放手勢後,系統将以你當時的注視點作為原點,縮小或者放大圖片,并且該處影像還會直接居中,呈現在用户面前。
▲根據視線精準放大圖片
蘋果還舉了另一個例子,在繪圖中,你可以用手擋做畫筆直接塗抹寫,但是當你的目光轉向畫布的任一角落,并且用手輕輕點擊一下,你的畫布将會自動調整到剛剛目光所注視的位置。
在蘋果看來,眼手協同的方式,不僅能夠簡單快捷地執行命令,并且還能精準實現轉移。
九、站在在大劇院做匯報?Keynote 成舞台提詞器
在空間設計開發者課程中,蘋果舉了一些例子講述空間感将會給用户帶有哪些體驗更新。比如説,自适應的視窗設定、光線的變化等。其中比較有趣的一項功能,就是 Keynote 的演講模式更新。
在頭顯應用内的 Keynote 排練演示功能中,用户将進入一個環繞式劇院内,而演示的文稿則會在左下角顯示。這樣的方式,就和登上大舞台的演講家一樣,而 Keynote 則成為了提詞器面板。
▲沉浸式演講模式
相比此前的演講方式,這樣的排練更加真實,也更加具有沉浸感。也許,社恐們在這樣的演練下,會增加幾分 " 抗性 ",在演講時獲得更好的成績。
從 Keynote 的更新中,我們可以看到在 " 移植 "iOS 和 iPadOS 等原生應用上,蘋果不僅是将内容和功能遷移過來了,并且還結合頭顯所特有的 " 沉浸式 " 和 " 空間感 " 做了不小的更新。
十、30min 頭顯體驗有 " 貓膩 "?AR/VR 光學專家提出質疑
在發布會結束後,有一小部分媒體獲得 " 優先體驗權 ",在驚嘆聲和激動聲中,人們對頭顯的期待值不斷拉高。但也有部分專家發現,這頭顯體驗環節似乎通過巧妙的設計避開了部分關鍵功能體驗。
AR/VR 光學專家 Karl Guttag 率先發聲,從體驗時長、安全性、人體工學、算法以及眩暈等多方面提出質疑。
在體驗時長上,幾乎每位體驗的媒體都在工作員工的指導下獲得 30 分鍾的體驗時間。30min 的體驗,能避開 Vision Pro 一些潛在的遺憾。比如説,佩戴時間太長,頭顯的重量造成的不适感,續航時長的問題等等。
▲ Vision Pro 實物圖
在體驗場景上,蘋果設定的固定體驗功能,并未涉及到大範圍的動作。這也從一定程度減少了眩暈的出現。Guttag 也表示,在眩暈方面,目前蘋果的低延遲、高刷新率方案,不足以解決現有頭顯類的視覺問題。
而且,據 The information 報道,沒有一個蘋果高管或者蘋果員工在公開場合展示其部分特殊功能,如 Eyeslight、虛拟鍵盤等。這或許意味着蘋果硬體以及相關功能,仍未達到較為穩定的程度。
我們鮮少看到有媒體戴着頭顯四處走動,Vision Pro 頭顯的透視方式能否保證用户能夠順利感知到四周環境的危險,蘋果頭顯的安全性方面也被打上了問号。
在 Vision Pro 頭顯和消費者們見面前,我們仍對這款革命性的產品保持尊重和好奇的心态,期待其與我們的見面。
十一、上海開發者或成國内首個見到 Vision Pro 的群體
在發布會結束後,哪裏能買,哪裏能體驗成為人們最為關注的幾大問題之一。盡管蘋果官方在發布會上給出的回答是明年早些時候發售,并且率先在美國市場上市。
▲ visionOS 開發計劃
但總有一小部分群體會得到蘋果的 " 優先權 "。據悉,蘋果會在庫比蒂諾、倫敦、慕尼黑、上海、新加坡和東京這六個地方設立開發者實驗室。由此可見,上海的蘋果開發者們或許成為國内首批 " 嘗鮮 " 的人。
此次,蘋果為開發者們提供 Vision Pro 開發工具包、visionOS 應用兼容測試以及其它服務。
十二、如何和其他設備產生聯動?UWB 芯片或成關鍵
Vision Pro 發布後,蘋果分析師郭明錤也在近日發表了他對 Vision Pro 的最新看法,并對蘋果進行了一些預測。他認為,iPhone 15 将配備超寬帶芯片,該芯片将改進與 Vision Pro 的集成。同時,Apple 積極更新 iPhone 硬體產品規格以建構更有競争力的 Vision Pro 生态。
▲郭明錤推特
除了 iPhone,我們也在發布會上看到這樣一個畫面,只需要一眼,就可以将 Mac 畫面内容,移植到 Vision Pro 上。部分工程師認為,這本質上是在 Vision Pro 上運行 Mac 軟體。這曾是蘋果曾經 " 斃掉 " 的操作方式之一,因為 Vision Pro 的作業系統 visionOS 功能不夠,因為它基于 iOS,而 iOS 已經是 Mac 作業系統的精簡版。
同時,The information 近期也提到, Apple TV+ 團隊内,有一個在加利福尼亞州卡爾弗城的小組正在執行代号為 Z50 的項目,他們主要從内容包括為蘋果電視節目《史前星球》構建虛拟恐龍,又或者科幻節目《為了全人類》改編的其他内容。在蘋果自身的優勢上,蘋果正在從硬體、内容等多方面為 Vision Pro 加碼。
十三、13 年堅持收購 AR 創企,揭開 Vision Pro 背後的功臣們
在蘋果 Vision Pro 發布後,又傳出蘋果收購 AR 初創公司 Mira 的消息。據目前消息來看,Mira 在企業級應用以及硬體方面曾取得一定的成績。
從 2010 年開始,蘋果收購 AR 創企的消息就不斷被爆出,而從 Vision Pro 上,我們也能看到不少創企的 " 大招 " 有所體現。
▲蘋果收購 AR 企業歷程(圖源:VR 陀螺)
比如説,蘋果收購的創企中,Limbak 曾在 VR 頭顯鏡頭制作,以及 Pancake 方案有所創新,而 Vision Pro 的 3P Pancake 方案正是其成功的主要方向之一。而蘋果在空間視頻、辦公場景中展現的會議場景,或許也和蘋果在 2020 年收購 Spaces 團隊有關。Spaces 為 Zoom 提供 VR 套件和技術支持,讓用户通過虛拟人物形象進行演示和匯報功能。
▲ Vision Pro 視頻會議場景
蘋果在眼動互動技術積累,也有部分得益于德國眼球追蹤公司 SensoMotoric Instruments,該公司成立于 1991 年,在眼動技術方面擁有超過 20 年的經驗積累。
可以看出,蘋果維持其較強的創新能力背後,也離不開其一次次精準的收并購,吸納優秀的團隊。或許,這方面,也是值得國内企業學習之處。
結語:将細節打磨極致,Vision Pro 提供創新新思路
喬布斯所幻想的 " 視頻頭顯 " 在 18 年後,成為空間計算時代的新鑰匙,正在掀起新一輪的互動革命的改變。
在蘋果的開發者課程中,我們看到 Vision Pro 較為優質的體驗來源于蘋果對用户需求的細心觀察,以及将用户感受放在第一的體驗。無論是對用户雙眼的保護,還是試圖分析用户注視行為背後的含義,蘋果都在以新的方式重新定義空間計算的互動方法。
但 Vision Pro 是否能夠重塑消費者的認知?平價版頭顯又将有哪些功能?我們或許還需要耐心等待市場的反饋。