文/VR陀螺 萬里
去年年底,谷歌發布了其XR操作系統Android XR,該系統的最大亮點在于高度集成Gemini,可以實現畫圈搜索、全局AI助手等能力。
對于Vision Pro而言,它也沒有忽視AI的重要性,其在最新系統版本visionOS 2.4中引入了對Apple Intelligence的支持。
在AI的加持之下,Vision Pro能否改頭換面?
圖源:網絡
設置加入“Apple Intelligence”選項,重點在于寫作、畫圖兩大板塊
目前想要體驗Vision Pro的Apple Intelligence,用戶需要先將系統升級為vision2.4最新版本,此外,還需要將設備語言以及Siri語言均設置為美式英語。
當進入新系統,可以發現它的主頁UI并沒有太多變動,但是有些地方可以讓人隱約察覺出它暗含的AI能力,比如設置選項中多出了一個Apple Intelligence開關選項,搜索欄點擊后會出現一個蘋果經典的環形彩虹圈動效、控制中心新增了一個新款Siri圖標等。
注:對于國內用戶而言,Vision Pro的很多AI能力仍未對外開放,部分功能體驗會結合官網資料進行講解。
圖源:VR陀螺
- Siri:可以打開地圖門店,但依然“智障”
更智能的Siri是筆者最期待的功能,可惜在這一方面Vision Pro的改進并不算多。
在手機端,Siri可以處理一些簡單的操作,如定鬧鐘、創建備忘錄、打開關閉APP等,這些在頭顯端同樣可以實現。
除了以上常規功能,Siri似乎專門針對Vision Pro進行了一些特定優化:
1、融合了眼動追蹤,Siri可以獲悉用戶視線聚焦的方向,基于此,用戶可以看著某個聯系人圖標并讓Siri給該用戶發送信息;
2、地圖應用有所改進,如當你說“show me some coffee shop”,Siri會自動彈出潛在門店,用戶可以進一步跳轉地圖APP以查看門店評分等信息。
圖源:VR陀螺
3、呼出Siri的方式更加多樣化,除了語音喚醒,用戶還可以通過控制中心以及妙控鍵盤(Fn+S)打開。
Siri的手勢入口,圖源:VR陀螺
除了以上小幅度改進外,Siri能力并沒有本質提升,它并沒有變得更加聰明,你無法跟它長時間聊天,很多時候詢問它一些問題也只會簡單粗暴彈出搜索鏈接。
其次,它不支持類似Android XR的多模態能力,后者不僅可以識別屏幕窗口內容還可以查看透視相機所看到的真實世界畫面。因而Siri整體看起來仍非常呆板。
- 文本能力:提供輕量化的輔助工具
根據蘋果宣傳信息,visionOS 2.4在AI寫作能力方面具有較大提升,這對于頭顯辦公用戶而言是一大福音。(該功能未能順利體驗,部分資料來源于蘋果官網)
在郵件等寫作環境下,當用戶選擇一個文本段落,系統會自動彈出一個“Writing Tools”選項,而后用戶可以基于AI工具進行校對、重寫、總結等操作。
其中校對功能可以協助檢查文本中的語法以及拼寫錯誤;重寫功能可以幫助調整文本的寫作風格,如讓行文看起來變得更加友好、更專業或者更加言簡意賅等;總結功能則可以快速整理出文章的核心內容,并支持文本導出。
值得一提的是,visionOS 2.4還引入了ChatGPT,(需要在設置入口單獨打開),在ChatGPT的加持之下,用戶可以進一步體驗長文本生成等功能。
其他方面,信息和郵件應用中新增了智能回復功能,AI可以基于此前收到的信息給用戶提供相應的回復建議。在通知欄,系統會自動對信息進行整理,并生成通知摘要等。
圖源:Apple
- AI圖像能力:加入Genmoji,相冊更智能
Genmoji是新系統的另一個重要的AI能力,簡而言之,用戶通過鍵盤輸入表情符號時,會發現鍵盤中多了一個文生AI表情包功能,生成后的表情包可以通過Messages應用發送給好友。
基于蘋果演示視頻來看,AI表情包生成速度較快,并且十分可用,但就個人而言,我并不喜歡AI生成的呆板表情包。
圖源:蘋果
在相冊端,Vision Pro同樣進行了較大的改革。目前筆者能夠體驗的功能之一是相冊2D轉3D,如下圖所示,打開相冊后,部分相片左上角會多出一個“Spatial”按鈕,點擊后系統會進一步處理照片并生成一張具有空間景深感的照片。
Vision Pro的2D轉3D過程,圖源:VR陀螺
雖然從上圖無法直觀感受到3D圖片的生成質量,但根據筆者主觀體驗,它的效果會優于市面上大部分VR/AR廠商的同類型解決方案。此外,2D轉3D,有些時候會提供一些獨特的體驗,比如有時候你看一張2D圖片時會忽視里面的人物、物體的前后站位等信息,但是啟用3D后系統會將這些深度信息重現在你眼前。
當然,2D轉3D并非所有圖片都適用,一些人物過多的聚會場景以及部分動物、風景類照片不受支持。
除此之外,相冊還新增了自然語言搜索以及創建記憶影片功能(這兩項功能未能順利體驗),其中自然語言搜索可以通過文本/語音描述的方式快速找到某張照片以及視頻。而創建記憶影片功能可以基于圖片庫已有的照片視頻資料生成帶有故事情節以及專屬配樂的影片。
Vision Pro相冊的電影生成功能,圖源:蘋果
visionOS2.4 特色APP體驗:優雅但單薄
伴隨著visionOS 2.4推出,蘋果還為Vision Pro準備了幾款第一方APP,其中一些APP旨在用于擴展頭顯端的AI體驗,如《Image Playground》;一些APP旨在用于補充頭顯的內容生態,比如《Spatial Gallery》;另外還有一些APP旨在加強不同設備之間的連接管理能力,比如iOS端的《Apple Vision Pro》APP。
- 《Image Playground》
這是一款圖像生成APP,底層由Apple Intelligence驅動,目前已經在iPhone、iPad以及Vision Pro上線。(該應用需要在設置欄中啟用,國內同樣不可用)
根據描述,Image Playground可以將相冊的照片進一步加工,如增加人物、改變風格背景等。此外,它還能將不同照片元素“縫合”在一起。
不過,該應用在iOS平臺評分不佳,只有2.5分(5分制),這是一個頗為糟糕的成績,很多負面批評集中在AI聽不懂具體指令、生成畫面質量一般、使用場景有限等。
《Image Playground》iOS版,圖源:網絡
在Vision Pro端,該應用評分數只有3個,暫時沒有相應的評論信息,這側面反映了頭顯用戶對于該應用的使用意愿確實不高。
有海外用戶指出,《Image Playground》可以生成2D圖片,然后再通過相冊的spatial功能實現3D化。隨著后續Apple Intelligence以及Siri能力的提升,用戶或許能夠直接通過語音指令生成相應的2D圖片甚至3D模型,這是一個值得期待的發展方向。
《Image Playground》Vision Pro版,圖源:網絡
我們可以發現,對于AI文生圖功能,蘋果顯得非常謹慎,對于不容易出錯的小表情包生成功能Genmoji,它選擇直接集成在系統端。而對于玩法更加多樣化,但是更容易“翻車”的大圖片生成,蘋果選擇以APP的形式發布,并且將它的功能限制在了圖片再加工層面,這可能有利于規避部分負面的結果。
- 《Spatial Gallery》
這是一個空間視頻/照片精選應用,里面收集了部分由藝術家、電影制作人和攝影師創作的空間照片、空間視頻和全景圖作品,主題涵蓋影視創作、藝術、文化、旅行等。
此前Vision Pro已經不乏一些空間照片/視頻APP(如kandao XR),蘋果推出《Spatial Gallery》后可以進一步補充頭顯的內容生態。只不過從目前來看,《Spatial Gallery》的內容庫仍十分單薄,平常內容更新頻率也很低。
其他方面,該應用的評分數只有40,成績同樣頗為慘淡。
圖源:VR陀螺
寫在最后
Vision Pro visionOS 2.4版本更新后引入Apple Intelligence,這對于MR辦公用戶而言可能十分受用,但對于普通玩家而言,這些單薄的AI能力所帶來的吸引力仍十分有限。
由于蘋果對于AI功能的克制,并且追求功能的完成度,使得它在功能豐富性方面慢了半拍。當然,也有人認為蘋果對于隱私問題的過分執著使得其在AI功能開發上顯得畏首畏尾。
不過,無可否認的是,從長遠來看,VR/MR深度集成AI會是一個重要趨勢,蘋果還在不斷迭代優化當中。
近期蘋果在AI方面動作頻出,比如前Vision Pro負責人Mike Rockwell已于近期接管了蘋果的Siri團隊,此舉旨在加速開發更加個性化的Siri,樂觀預計Vision Pro的Siri將會在明年得到“改頭換面”。
此外,蘋果預計會在今年6月發布visionOS 3,有消息指出,“這是一個功能豐富的版本”。屆時不排除設備將會加入更多AI能力。
visionOS無疑是一個優雅并且完成度較高的系統,但是從目前來看,它在AI方面的動作緩慢,隨著后續搭載Android XR的頭顯設備推出,它在AI功能體驗方面將不會有任何優勢。對此,蘋果還需要加把勁。
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.