最近蘋(píng)果接連更新了中文版“人機(jī)界面指南”，推出visionOS SDK和 Beta系統(tǒng)，讓我們從中進(jìn)一步了解到更多信息。

(資料圖片僅供參考)

在本文中，我主要通過(guò)WWDC公開(kāi)課以及人機(jī)界面指南，還有visionOS模擬器中了解到的一些不容易被大家關(guān)注到的信息，供大家參考。

1，數(shù)碼旋鈕

支持的功能包括：

調(diào)整音量（旋轉(zhuǎn)）；

調(diào)節(jié)透視程度（旋轉(zhuǎn)）；

居中顯示內(nèi)容/重置視角（長(zhǎng)按）；

退出App進(jìn)入主屏幕；

強(qiáng)制退出App（同時(shí)按住數(shù)碼旋鈕和頂部按鈕2秒）；

開(kāi)啟輔助功能（按3下）；

第一次佩戴時(shí)校準(zhǔn)眼球數(shù)據(jù)（長(zhǎng)按，直至出現(xiàn)提示）；

重新校準(zhǔn)眼球和手部追蹤（按4下）。

這里面也有一個(gè)疑問(wèn)就是，蘋(píng)果將沉浸模式切換功能放在頭顯的按鈕，如果每次切換都需要手動(dòng)旋轉(zhuǎn)一下，不僅繁瑣而且體驗(yàn)上還會(huì)有割裂感。我更希望是在系統(tǒng)快捷設(shè)置中也加入這個(gè)功能，通過(guò)手勢(shì)或語(yǔ)音進(jìn)行控制。

2，沉浸與透視

這里還是在啰嗦一下，因?yàn)楦拍畋容^多，剛開(kāi)始接觸容易混淆。

visionOS提供了兩種類型的應(yīng)用：Windows（2D窗口）和Volume（同時(shí)會(huì)支持2D窗口和3D內(nèi)容，更適合3D）。

visionOS透視調(diào)節(jié)

同時(shí)，visionOS還有兩種虛擬空間狀態(tài)：共享空間（Shared Space），支持同時(shí)運(yùn)行多個(gè)應(yīng)用，可共存；全空間（Full Space），獨(dú)立顯示1款應(yīng)用。

全空間模式并非一種默認(rèn)狀態(tài)，而是應(yīng)用可選狀態(tài)，可根據(jù)應(yīng)用不同場(chǎng)景進(jìn)行開(kāi)啟或退出，意味著一款應(yīng)用可以在A場(chǎng)景是共享空間，而在B場(chǎng)景處于全空間，一旦進(jìn)入全空間系統(tǒng)會(huì)隱藏其它所有應(yīng)用的窗口和內(nèi)容。

沉浸式三種類型

另外，visionOS還提供了另一個(gè)參數(shù)，也就是沉浸式類型，它有三種：

mixed：虛擬內(nèi)容和現(xiàn)實(shí)環(huán)境融合顯示。

full：全虛擬模式，類似于傳統(tǒng)VR應(yīng)用。

progressive：半沉浸，相當(dāng)于上面兩種模式的混合，即可以提供沉浸動(dòng)態(tài)效果，也可以顯示真實(shí)環(huán)境。

visionOS照片-全景照片

上圖中蘋(píng)果展示的開(kāi)啟全景照片場(chǎng)景時(shí)，就是progressive的類型，而在看其它照片或未進(jìn)入全景照片預(yù)覽界面時(shí)，則處于mixed模式。

蘋(píng)果在文檔中提到：visionOS中大多數(shù)應(yīng)用啟動(dòng)都是一個(gè)窗口，根據(jù)需要打開(kāi)不同的場(chǎng)景類型。要為應(yīng)用的每個(gè)關(guān)鍵場(chǎng)景找到合適的、最低沉浸度環(huán)境（即同一App可在不同場(chǎng)景實(shí)現(xiàn)不同沉浸度），不要一味的追求全沉浸場(chǎng)景。由此也能看出，蘋(píng)果Vision Pro追求的是AR和MR體驗(yàn)，也為今后OST的AR眼鏡做好重要基礎(chǔ)。

這里單獨(dú)講一下半沉浸模式，類似于發(fā)布會(huì)上講到的瀏覽全景照片的效果，就是呈現(xiàn)一個(gè)180度半包圍的沉浸，這時(shí)依然可以看到上下邊的現(xiàn)實(shí)透視環(huán)境，而且你左右移動(dòng)時(shí)這個(gè)半沉浸畫(huà)框里的內(nèi)容也對(duì)應(yīng)的移動(dòng)，整體上視覺(jué)沉浸感超級(jí)棒。

在App開(kāi)啟時(shí)默認(rèn)進(jìn)入共享空間（無(wú)論是窗口應(yīng)用還是沉浸應(yīng)用都是如此），共享空間中的App可以轉(zhuǎn)到全空間，從而只運(yùn)行1款應(yīng)用。也就是說(shuō)，Vision Pro無(wú)法像傳統(tǒng)VR可以直接進(jìn)入全沉浸模式，只能之后手動(dòng)調(diào)整。

從虛擬切換到顯示的過(guò)渡動(dòng)畫(huà)

從上述動(dòng)畫(huà)來(lái)看，從虛擬場(chǎng)景切換到顯示場(chǎng)景中時(shí)，顯示場(chǎng)景的拍攝的畫(huà)面也會(huì)有一定程度的縮放（看白色背景墻的邊緣縮放），這一點(diǎn)還不確定是否是渲染效果?？紤]到蘋(píng)果的宣傳片通常會(huì)與實(shí)際場(chǎng)景相契合，因此猜測(cè)Vision Pro也具備這一功能，當(dāng)然這一點(diǎn)也充分利用了VST的特性。

深度感知：用戶依賴距離、遮擋和陰影等視覺(jué)提示來(lái)感知深度和理解周圍。系統(tǒng)自動(dòng)使用色溫、反射和陰影等視覺(jué)效果來(lái)幫助用戶感知虛擬內(nèi)容的深度。

為了保證虛擬對(duì)象的視覺(jué)舒適性，要放在至少距離頭顯1米遠(yuǎn)處，這一點(diǎn)和VR應(yīng)用應(yīng)用開(kāi)發(fā)邏輯相同。

3，手勢(shì)交互

手勢(shì)分為直接手勢(shì)、非直接手勢(shì)。

直接手勢(shì)：包括虛擬鍵盤(pán)輸入，可以用手直接觸碰虛擬物體進(jìn)行交互；

非直接手勢(shì)：融合眼球追蹤，簡(jiǎn)單的捏合進(jìn)行選中、拖拽等動(dòng)作；

自定義手勢(shì)：可以根據(jù)開(kāi)發(fā)者需求，創(chuàng)建自定義手勢(shì)交互，比如比心來(lái)觸發(fā)關(guān)鍵操作等。

大部分情況建議非直接手勢(shì)，這樣的話手可以在頭顯下方就可以結(jié)合眼球追蹤使用。否則，雙手需要移到頭顯FOV視野內(nèi)，比如虛擬鍵盤(pán)打字類就是直接手勢(shì)，長(zhǎng)時(shí)間使用直接手勢(shì)易導(dǎo)致疲勞等。

自定義手勢(shì)

自定義手勢(shì)為開(kāi)發(fā)者提供了更多可能性，尤其是觸發(fā)一些關(guān)鍵交互場(chǎng)景時(shí)，會(huì)加分不少。不過(guò)也需要注意：自定義手勢(shì)大部分需要手臂抬起，連續(xù)多次使用會(huì)帶來(lái)肌肉或關(guān)節(jié)的疲勞感。

4，眼球交互

大部分情況，眼球注視提供高亮（或懸停效果）提示用戶焦點(diǎn)位置，并結(jié)合非直接手勢(shì)進(jìn)行交互。少部分情況下，眼睛注視可以實(shí)現(xiàn)頁(yè)面或菜單展開(kāi)等交互。

要注意的是：避免在較大的范圍內(nèi)/多個(gè)深度之間，連續(xù)或多次讓用戶進(jìn)行眼睛調(diào)整。

5，輔助模式

輔助模式下，visionOS還提供了多種交互類型：手部射線/指針、頭部射線/指針、放大鏡。

輔助功能-手勢(shì)射線

蘋(píng)果提到一點(diǎn)，開(kāi)發(fā)者應(yīng)該始終向用戶提供多種方式來(lái)與你的App交互。其中，基于手部、頭部的射線就是給眼球追蹤不便的用戶，進(jìn)行輔助交互的方案。

放大鏡功能，有點(diǎn)類似于現(xiàn)實(shí)中的放大鏡，可以放大空間中的顯示內(nèi)容。

6，定位空間

visionOS目前默認(rèn)以站姿、坐姿為交互方式，并沒(méi)有主推大范圍移動(dòng)的內(nèi)容和玩法。蘋(píng)果建議：讓用戶通過(guò)極少量或無(wú)需身體活動(dòng)來(lái)使用你的應(yīng)用。

用戶處于全沉浸式體驗(yàn)中時(shí)，避免鼓勵(lì)其移動(dòng)，并且有多種措施避免碰到現(xiàn)實(shí)中的物體。此時(shí)，系統(tǒng)會(huì)定義一個(gè)以頭部為原點(diǎn)的圓形不可見(jiàn)區(qū)域：

當(dāng)用戶頭部移動(dòng)超過(guò)原點(diǎn)1米時(shí)，內(nèi)容自動(dòng)變?yōu)榘胪该?，幫助用戶確認(rèn)方向回到原點(diǎn)或重置原點(diǎn)；

當(dāng)用戶頭部移動(dòng)超過(guò)原點(diǎn)米時(shí)，應(yīng)用自動(dòng)暫停并開(kāi)啟全透視，避免撞到物體；

當(dāng)用戶移動(dòng)過(guò)快或靠近現(xiàn)實(shí)中的物體時(shí)（系統(tǒng)自動(dòng)檢測(cè)），應(yīng)用也會(huì)自動(dòng)暫停并開(kāi)啟全透視。

由此可見(jiàn)，蘋(píng)果給全沉浸VR游戲還準(zhǔn)備的空間只有直徑為2米的圓形空間（以用戶頭部為中心），超出即半透明顯示，再超出米后應(yīng)用會(huì)自動(dòng)暫停。所以，給Vision Pro開(kāi)發(fā)VR游戲得避免這一點(diǎn)。

7，多人體驗(yàn)

Vision Pro中最吸引人的還是“空間Persona”虛擬形象了。比如FaceTime通話時(shí)，可以顯示出每個(gè)Vision Pro用戶的虛擬形象。

而到了多人聯(lián)機(jī)時(shí)，可以同時(shí)和非Vision Pro用戶之間跨平臺(tái)聯(lián)機(jī)，系統(tǒng)內(nèi)置共有三種Persona 模板：并排式、圍繞式和會(huì)話式。

多人體驗(yàn)-三種模式

并排式簡(jiǎn)單就是幾個(gè)人并排在一起觀看一塊大屏、看板。每個(gè)人可以共享自己的屏幕或文件等；

圍繞式就像線下聚會(huì)圍在一起討論，適合多人查看3D模型；

會(huì)話式像兩種結(jié)合，幾個(gè)人圍繞在一起，不過(guò)中間沒(méi)有3D模型，取而代之的是旁邊的大屏/看板。

參考：Apple