今天小編分享的科技經驗:Vision Pro互動設計,蘋果的陽謀,歡迎閲讀。
文 /VR 陀螺 元橋
距離蘋果發布新品已過半月左右,但庫克登場説出的那句話 " 正如 iPhone 帶我們進入移動計算時代,Apple Vision Pro 将帶我們進入空間計算時代 ",仍讓人感到興奮。
興奮的不僅僅是我們或将迎來的新時代,更有這款產品的互動設計對當下頭戴設備的影響。在 Vision Pro 發布半個月的時間中,可以看到諸多體驗過 Vision Pro 的博主都對這款產品的互動設計表示甚為驚喜;VR 陀螺近期也與諸多業内人士展開深度交流,能感受到大家對于蘋果的互動設計也都一致表示震感。
畢竟 Vision Pro 擺脱了「搖桿」外部操控器,用户僅通過眼睛、手、語音便可與設備進行互動,并且眼動、手勢與語音之間是打通的,是一整套的互動方式。
毫無疑問,蘋果在重新定義 MR 互動方式的标準,而從每個技術上來看,Vision Pro 又是蘋果多年來布局的一個體現。
從初代 iPhone,看 Vision Pro 的互動設計
喬布斯是一位為產品設計而瘋狂的人,在每一個步驟上,他都會推進删除與簡化,小到一顆螺絲釘的布局都要經過幾個回合的篩選;由此,蘋果一直都以其精湛的硬體與軟體的設計、極簡的風格而聞名全球。
在設計蘋果系列產品時,喬布斯曾説 " 我們的設計思想就是「極致的簡約」,我們管理公司、設計產品、廣告宣傳的理念就是一句話——讓我們做得簡單一點,真正的簡單。"
2007 年第一代 iPhone 發布,喬布斯在演講中説道:
" 今天我們要推出三款同級别的革命性產品。首先是一台帶觸控的寬屏 iPod,其次是一部革命性的手機,還有一款具有突破性意義的互聯網通信設備。所以,是三樣東西:一台帶觸控的寬屏 iPod,一部革命性的手機,一款具有突破性意義的互聯網通信設備。一台 iPod,一部手機,一款網絡通信器 …… 你們明白我在説什麼嗎?這不是三台獨立的設備,這是一台設備,我們叫它 iPhone"。
蘋果為了初代 iPhone 的到來,研發了 2 年多的時間。就在喬布斯登台之前,他還召集了其團隊,告訴他們要記住那一刻,也就是 iPhone 問世之前的那一刻。因為,下一刻,一切都會改變。
确實,第一代 iPhone 的設計,多點觸摸功能的螢幕徹底改變了傳統手機按鍵式操作,打開了智能手機世界的大門,并且在後續機型中引入的 App Store,讓手機成為了真正的移動智能終端,主導了當時的黑莓、摩托羅拉等智能手機。
與第一代 iPhone 同年發布的黑莓 Curve 8310,因為實體鍵盤擠占了空間,所以螢幕只有 2.5 英寸
再回看 Vision Pro 的互動方式就如同 iPhone 的多點觸摸功能設計,摒棄了多餘的工具,更加貼近人體的自然習慣,讓人類自己成為自然的互動工具,更重要的是 Vision Pro 讓頭戴設備充滿了「科幻的魅力」。據稱,Vision Pro 的互動簡單到用户只需要 1 分鍾就能适應甚至零成本的學習,界面極度絲滑,視窗就像真實世界中的運動軌迹一樣。
視線掃過時的細膩動畫效果,圖源:蘋果
在 Vison Pro 發布之後,扎克伯格曾對蘋果頭顯發表了自己的看法,他認為「蘋果 Vision Pro 并沒有實現 Meta 未探索技術領網域的任何重大突破」。其實不僅扎克伯格這麼看,業界幾乎也認為 Vison Pro 并沒有帶來創新。但能夠看出 Vision Pro 并不重在發明,它的每個點都讓人驚喜,亦是一種創新。在技術上來看,Vision Pro 幾乎颠覆了第三次人機互動的創新,對于人機互動的發展來説,邁出了極大的一步。
《時代》雜志作家格羅斯曼在 iPhone 發布之後,曾一針見血的指出 "iPhone 并沒有真正發明許多新的功能,而是讓這些功能實用很多。這很重要,如果工具不順手,我們往往會覺得自己太傻;如果工具太糟,我們也會覺得自己很遜;而如果有人改進了工具,我們就會覺得體驗很好,自己也很完美。"
格羅斯曼直接從人文的視角解釋了為什麼蘋果的產品能夠大受歡迎,頭戴設備一直都未被大眾所接受,互動環節的「麻煩」便占據了其中一個原因。喬布斯也曾在一次采訪中談到的一個故事," 一個 6 歲小男孩在未接觸過 iPad 的情況下,僅憑直覺就可以用手指在螢幕上滑動,啓動應用程式并玩遊戲。"
如果頭戴設備的互動能夠簡單到如此地步,還會很難推進大眾市場?相信在兩三年之後,将會見證 Vision Pro 能否成為下一代空間計算平台以及能否打開大眾市場。
其實,蘋果每一次新品發布都會伴随互動方式的革新,如 Mac 的滑鼠、iPhone 的多觸點功能、iPad 的 Apple Pencil 再到如今的 Vision Pro 的眼球、手勢與語音。可以説,正是因為有了每一次的互動革新,使用設備的潛能才真正被挖掘出來。
正如 2005 年喬布斯對微軟一款平板電腦的評論 " 因為配有一支手寫筆,這款產品就廢了。" 後來微軟的平板電腦也确實被蘋果颠覆了,不難看出好的互動設計對于用户而言多麼重要。
一般人類是通過最基礎的五官:眼(視覺)耳(聽覺)鼻(嗅覺)舌(味覺)身(觸覺)去感知世界。科技企業一直都在不斷嘗試模拟人類感知世界的五官,從而產生了各種各樣的終端產品,只是一直仍未看到一款產品可以真正解決人機互動上存在的缺陷。Vision Pro 的到來,極大滿足了人們對人機互動的想象。為了能夠很好理解 Vision Pro 的互動設計,以下将從眼動、手勢與語音三方面進行拆解。
眼動追蹤
眼動追蹤一直都是 AR/VR 產業有待攻破的一大技術難題,近兩年在很多新發布的 AR/VR 設備中已經可以看到,越來越多的產品搭載了眼動追蹤技術,但整體體驗上并不是很流暢,甚至有的都沒有發揮這一技術的能力。
一方面,眼動追蹤的互動方式與搖桿的配合十分不完美,用户很難真正把搖桿和眼動追蹤聯合起來運用。如果説疊加一項技術但又不能發揮這項技術的能力,那麼就會讓人覺得這項技術只有酷炫。另一面,眼動追蹤對精準度的要求極高,如果技術不能做到及時捕捉眼睛的視線,就會導致定位不準,體驗感極差。
眼動追蹤技術研究的三大方向是眼球的注視點看向哪裏、何時看、看多久,從而去捕捉用户情緒。在 AR/VR 設備中,眼動追蹤的系統包含了近紅外光源、高分辨率攝像頭、以及影像處理相關的算法,三者缺一不可。
因此,能夠真正把眼動追蹤發揮好,底層技術很重要。近期陀螺君寫了一篇《從 Vision Pro 一窺眼動追蹤互動的巨大潛力》分析了蘋果的眼動追蹤技術,可點擊詳閲。
目前,大多數 AR/VR 設備采用的都是單芯片,在算法與影像處理方面的表現力匮乏。喬布斯就曾評價過英特爾的芯片設計,直指該芯片的影像處理方面太慢,應該有款芯片專門用來處理影像。
多年來,終于在 Vision Pro 這款產品看到了協處理芯片的設計。Vision Pro 搭載 M2 與 R1 芯片,其中 R1 芯片為蘋果全新設計,專為頭顯處理攝像頭、傳感器的數據傳輸(包括 12 個攝像頭、5 個傳感器和 6 個麥克風的輸入)。
據蘋果表示:傳輸速率僅需 12 毫秒便可将内容同步到 Vision Pro 的螢幕上,幾乎沒有延遲,甚至可以達到比眨眼的時間快 8 倍,對比一下 Meta 的 Quest 3 就能夠直觀的感受到 Vision Pro 的裝置是有多「豪」了。
Vision Pro 與 Quest3 部分參數對比
為了能進一步提升注視點的準确性,蘋果還為 Vision Pro 搭配了精心設計的 UI,可以很好的輔助眼球追蹤的功能。
從目前 Vision Pro 的參數與體驗者的評價來看,Vision Pro 在技術上完全做到了快與準,甚至都未看到有相關視線定位不準或視線抖動的情況。同時,其眼動追蹤也做到了非常自然,用户的眼睛注視圖示然後雙指捏合,即可打開新的應用,眼睛在菜單欄停留一段時間會自動彈出二級菜單 .......
眼動追蹤雖并非蘋果首創,但蘋果卻是首家将其作為核心互動方式的公司。不可否認,Vision Pro 的到來打開了眼動追蹤互動的潛力,更創新了眼睛 + 手勢 + 語音的整套打法。
裸手互動
在 AR/VR 剛興起時,業内就幾乎确認了裸手互動是未來 AR/VR 的發展趨勢,只是要想做好手勢互動的确認度,是一項極大的技術難題。
也正由于技術的受限,裸手互動這一方式就一直都未被完整的發揮出來。手部是我們日常生活中互動信息的一個很重要環節,除了嘴巴之外,手部是最常用的信息輸出肢體。
回看 PC 時代,即便最初會出現各種互動方式,最終都會落到滑鼠、鍵盤,與手部相關的标準互動上。而發展下一代計算產品,手部互動仍很重要。在技術上未有突破的情況下,搖桿是 VR 設備最好的互動方式,相較于裸手互動,搖桿的準确度可以達到 100%,尤其體現在玩遊戲的過程中,所以現在大多數 VR 設備都采用搖桿的互動方式。
此次蘋果放棄了搖桿這一外部操控器的互動方式,将裸手互動真正發揮了出來,展現了與市場上其他玩家完全不同的策略。也可以説,蘋果意圖用最便捷的互動方式打開輕度場景的應用,将產品更進一步地推向大眾消費市場。
由于 Vision Pro 配備了四顆用于手勢識别的攝像頭,可以檢測腰部以下的手勢,用户還可以把手放在膝蓋上進行操作,甚是輕松自如。
使用 Vision Pro,雙手可以自然搭在雙腿上
除此之外,Vision Pro 中的攝像頭還能夠非常精确地追蹤眼睛視線,眼睛的位置是一個關鍵因素,可用于确定你想用手勢進行互動的對象。例如,查看應用程式圖示或虛拟元素會将其作為目标并高亮顯示,然後你可以執行手勢;或者想要打開的 App,配合手部微小的動作就能完成操作。
還值得一提的是,Vision Pro 已經可以實現虛拟鍵盤打字的方式。據了解,虛拟打字目前在觸感上還未達到理想的狀态,但蘋果内部已經在着手優化了。
蘋果實現虛拟鍵盤輸入
在人機互動層面,蘋果确實考慮到了用户體驗的方方面面,蘋果幾乎将裸手互動發揮到了目前技術的極致,甚至讓互動方式從科幻走入了現實,也讓空間計算平台的發展前進了一大步。
智能語音
在 ChatGPT 未發布之前,人工智能技術的發展已經把語音互動提高到了可用的水平,而在 ChatGPT 發布之後,智能語音已經成為十分自然的事情了。
在我們日常生活中,智能設備的出現越發普遍,用户對語音的互動也更為熟悉。例如在智能家居中,天貓精靈、小度、蘋果的 Home 再到智能手表與智能座艙,音頻的實時互動幾乎串聯了我們所有生活的場景。
與此同時,淘寶、微信等 APP 的應用對語音輸入的支持,都讓智能的語音互動迸發出了旺盛的生命力。而作為下一代計算產品的 AR/VR,語音互動必然也會成為其标配。而且實時互動語音技術也能讓頭戴設備的形态、用户體驗產生質的飛躍。
蘋果也将智能語音搭載進了頭戴設備中,還可配合眼睛與手勢進行互動。據稱,在 Vision Pro 中你可以通過語音呼叫 Siri,打開和關閉 App 或者頁面。VR 陀螺近期也寫了一篇文章,詳細分析了 Vision Pro 中的 AI 應用,可以點擊詳閲《深剖 Apple Vision Pro 中暗藏的 "AI"》。
Vision Pro 中呼喚 Siri
還值得一提的是,為了不使用户和周圍的人隔絕,蘋果還開發了一個名為 Eyesight 的反透視功能,這也是 Vision Pro 的一大基礎互動設計。當有人在你附近時,設備看上去會是透明的,即讓用户能夠看到身邊的人;而當你完全沉浸時,螢幕會暗下去,旁邊的人也會明白此刻的你注意不到他們。
從目前各個方面信息來看,蘋果完全創新了人機互動的方式,定義了頭戴設備「眼睛 + 手勢 + 語音」這一整套的互動标準,更為重要的是蘋果将這套互動方式也找到了合理的應用場景,落在辦公、視頻、家居與觀影上等輕度場景上,解決了互動方式與場景結合的難題。
Vision Pro 的到來對頭戴設備的影響就像初代 iPhone 的到來對手機市場的颠覆一般,或許并不會有初代 iPhone 那麼受歡迎,但人機互動界面是時候該迎來下一場的發展了。
庫克将 Vision Pro 稱為下一代空間計算產品,并不是 AR/VR,不同于市面上完全追求沉浸感的 VR 產品,Vision Pro 追求的是虛拟與現實的融合,讓用户可以在體驗沉浸感的同時也不會與外界隔離。
WWDC 2023 大會期間,陸川與蘋果副總裁展開了一番對話,其中特别令人印象深刻的是蘋果副總裁對 Vision Pro 到來總結的三點,他説:
" 第一,我們已經感覺到,一個科技劃時代的時刻就要到來了。與其讓别人來颠覆我們蘋果,不如我們自己來。能颠覆蘋果的,只有我們自己。"
" 第二,我們感謝過去開發出的所有全系列蘋果產品,因為它們掙回的這些錢。我們可以不計成本的去投入開發一個劃時代的產品。我們幹了六七年,就等今天。"
" 第三,也要感謝其他的蘋果產品,在這些產品的開發過程中。我們才能積累起足夠強大的技術,最後把所有的科技,集成在 Vision Pro 這一個產品上。"
從他的回答中,能夠看出蘋果對新一代產品的重視程度,以及也解釋了為什麼這件事蘋果可以做成。第一,蘋果足夠的有錢,2022 年賬面現金流就已過千億;第二,蘋果的技術累計足夠的強,Vision Pro 完全體現了這一點。
VR 陀螺曾統計過,蘋果從 2010 年左右就開始陸續收購或投資了多家面部識别、眼動追蹤、空間定位、手勢識别、動作捕捉等 AR/VR 相關的企業。
最終這些收購的企業技術都落在了 Vision Pro 上,例如蘋果内部一直都認為頭戴設備用控制器操控是個很「惱人的工具」,由此收購的多家面部追蹤公司以及多個傳感器公司,用多個傳感器實時追蹤人眼和手勢讓操作做到了更簡單。
可以説是目前為止,Vision Pro 是真正一款面向大眾消費者的 MR 產品,你可以用它看電影、工作、娛樂、學習、聯系家人 / 朋友等。
如何打通大眾消費者,一直都是 AR/VR 努力的方向,但無奈多年來,無論是從硬體設計上還是場景應用上,AR/VR 都未能吸引大眾消費者的興趣,這也是業内為什麼會一直都覺得 AR/VR 缺殺手級應用的原因。
但使用的不便捷也是讓諸多用户避而遠之的一大因素,蘋果到來或将會真正轉變這一點。雖然從目前來看 Vision Pro 在價格與性能仍還有很多進步的空間,但 Vision Pro 确實讓人感知到空間計算時代正在到來,站在虛拟與現實的融合發展上,Vision Pro 标志了一個技術的新開端。
未來,随着蘋果 MR 產品不斷迭代,或許将會替代掉電腦、iPad 與手機,實現萬屏歸一。