PC領域最熱門的話題莫過于AI PC,但任憑高通、英特爾如何宣傳,NPU+核顯的AI處理能力,仍然遠不及入門版的GeForce RTX 4050 Laptop GPU。是的,現實就是如此殘酷,真正讓你玩溜AI應用的PC,NVIDIA GPU其實才應該標配,因此大部分的熱愛游戲的玩家,可能早已擁有了AI運行利器。
那么AI PC說了這么長時間,到底可以做什么呢?在Bilibili World 2024開展前夕,筆者受邀參加了新一輪GeForce RTX 40系列品鑒會,僅僅相隔幾個月,游戲和創作領域的AI,再度升級,點技能點的速度快到離譜。
RTX AI又雙叒升級了
先說一個數據,目前為止,全球已經超過了1億臺RTX AI PC裝機量,并且超過了500款RTX AI加速的游戲和應用。開頭提到的GeForce RTX 4050 Laptop GPU守住了200 AI TOPS的底線,規格一旦拉高,比如RTX 4090 D直奔1300 AI TOPS。相比之下,驍龍X Elite主打宣傳的NPU性能為50 TOPS,未來計劃發布的Lunar Lake核顯+NPU的總AI TOPS為100左右。
重點在于RTX AI PC唾手可得,前有機哥機械革命、七彩虹開拓性價比,后有ROG、Alienware拉高性能,現在還有諸如紅魔16Pro的游戲本來攪局,光是RTX AI的OEM筆記本選擇就超過了200款。
龐大的基本盤讓NVIDIA把更多開發重心放在了AI應用和DEMO的開發上,游戲當然是玩家們最容易接觸到AI的方式之一。在GeForce RTX 40系列品鑒會上,NVIDIA展示了4款游戲DEMO,無一例外,DLSS 3在其中都扮演了非常重要的角色。
第一款游戲是喜聞樂見的《三角洲行動》(Delta Force: Hawk Ops),屬于繼承三角洲衣缽的續作。作為一款免費在線競技類FPS游戲,游戲幀率和畫面表現出的沉浸感非常重要,現場展示的機器以31.5英寸4K 144Hz miniLED顯示器搭配GeForce RTX 4090 D作為參考,所有光追特效拉滿。
游戲形式類似于戰地系列的陣地攻守,大量的載具和槍械可選,畫質拉滿的場景顯然是相當酸爽的。
這里引用從游戲中獲得截圖作為對比,給大家看一下光追開啟和關閉后的效果,高下立判。
RTX OFF
RTX ON
出于習慣,筆者看了一眼左上角的幀率表現,在DLSS 3和Reflex加持下,幀率130FPS+以上,系統響應25ms以內,重點是在沉浸畫面加高幀率表現下,游戲給予的手感與回饋非常到位,沒有部分網友回饋手感稀碎的情況,體驗帶勁。
第二款游戲是由網易游戲開發的《漫威爭鋒》(Marvel Rivals),在游戲形式上類似于《守望先鋒》,筆者嘗試的是一個推車圖,是的,扮演鋼鐵俠,與銀河護衛隊、X戰警一起在阿斯加德推車,一路還能享受到洛基的debuff互動,也是相當調皮的。
《漫威爭鋒》主要使用了DLSS 3和Reflex技術來提升游戲的操控感受,在3D建模下還會加入大量的2D漫畫效果,有點《無主之地》的味道,DLSS 3通過AI將幀率提升后,實際游戲表現出的質感不錯,如果朋友夠的話,多人游戲一定很帶勁。
第三款游戲來自《鳴潮》(Wuthering Waves),由于是跨平臺發布,正式版本是鎖了幀率的。這里NVIDIA使用的是游戲演示版,加入了DLSS 3技術和Reflex,在4K分辨率下,幀率輕松突破300FPS,正式版的60FPS真的不夠看。
游戲過程中,筆者嘗試了郊區和主城的切換,并且在釋放技能的時候切換人物,畫面的流暢感搭配32英寸4K miniLED的效果確實不是任何手機屏幕可以比擬的。
最后一款游戲是《解限機》(Mecha Break),這款游戲目前處在DEMO狀態,由西山居開發,主題是未來科幻機甲主題的多人對戰游戲。同樣,游戲中加入了DLSS 3和Reflex技術。機甲搭配美少女駕駛員確實是個不錯的賣點,在實際體驗中,近戰格斗搭配光影效果給人眼前一亮,當然也得益于4K高幀率的表現。
四款游戲在DLSS 3和Reflex加持下,表現出的手感與回饋均遠高于想象,即便其中部分游戲仍然是DEMO狀態,不代表最終品質,但半成品的表現出打擊感和畫面足夠讓人想多嘗試幾輪。由此可見,大多數游戲覺得手感不對,真的很有可能是沒有開啟DLSS 3和Reflex,下次覺得游戲不對味的同學,不妨先看看有沒有能開啟DLSS 3和Reflex的選項,亦或者先升級到RTX 40系列,給AI性能加個分。
功夫在戲外
NVIDIA利用AI提升游戲體驗的另一個方式是在游戲之外。例如目前正在測試的NVIDIA APP在未來將進一步取代GeForce Experience和驅動界面,與此同時,還能利用筆記本的硬件優勢,發揮出更多效果。
這里NVIDIA用DOTA2和巫師3來舉例,不同于以往簡單游戲濾鏡,AI濾鏡可以實現視覺清晰度提升、并且呈現出更豐富的畫面顏色。NVIDIA將其稱為RTX Dynamic Vibrance (RTX 動態亮麗)。比如在夜晚場景中,原本黑成一片的細節,被RTX Dynamic Vibrance AI提亮,但不會生硬或者過曝,特別是配合HDR顯示器,完全是另一種游戲體驗,AI濾鏡在實用性上比之前的濾鏡好很多。
需要注意的是,RTX Dynamic Vibrance本身是需要游戲接入API的,也就是游戲需要提供一定的支持。如果游戲不支持,NVIDIA APP也準備了后手,就是RTX HDR。這也是由AI加持的Freestyle濾鏡,可以將高動態范圍HDR視覺效果無縫引入到原本不支持HDR的游戲中。比如DOTA2,你想讓G胖更新支持,那一時半會是不可能的,不過NVIDIA APP直接讓其變成了可能,實際效果確實也不錯。
另外一個RTX Video就是利用RTX視頻超分辨率(VSR)和RTX Video HDR實現畫面轉換的效果,RTX 視頻超分辨率 (VSR) 可提升視頻分辨率,使圖像更加清晰銳利,而RTX Video HDR可將標準動態范圍 (SDR) 視頻內容轉換為高動態范圍 (HDR10) 視頻內容,進而增強視覺效果。
玩家可在Chrome、Edge、Firefox 瀏覽器和 VLC播放器觀看視頻時體驗由RTX Video所帶來的超清4K HDR視頻,感受由AI增強后的升采樣和HDR效果。另外在不久前RTX Video也正式對開發者開放。
熱門剪輯工具Davinci Resolve和萬興喵影也將新增對RTX Video的支持,即便是普通的SDR視頻,通過AI,也能輕松提升至HDR明艷的效果,再假以時日,AI可能真的有機會代替影視行業調色師的工作了。
順帶NVIDIA還展示了ChatRTX在筆記本端的應用,包括檢索增強生成(RAG)和 NVIDIA TensorRT-LLM,毋庸置疑,在離線運行下,目前再強勁的NPU,也抵不過任何一款GeForce RTX 40系列GPU,如果你真的注重性能和便攜性,也完全可以考慮買個輕薄型的獨顯筆記本,比如HP OMEN 14 SLIM,配上氮化鎵充電器,沒有什么AI問題是NVIDIA GPU解決不了的。
這里ChatRTX新增了ChatGLM3-6B中文大語言模型。用戶還可以通過Whisper模型實現語音識別,更方便地與AI模型對話。此外,CLIP模型可以讓用戶使用自然語言來快速、直觀地檢索本地的圖片。產品經理表示,利用GPU性能,CLIP可以更快速度的完成圖片的向量運算,再加上自然語言描述理解,它的找圖速度比你一個一個翻文件夾要快上不上。
比如你需要色彩斑斕鳥兒的照片,告訴ChatRTX就可以了。這套AI助手也是完全在本地部署的,在NVIDIA官網就能下載。
Covert Protocol DEMO多了個弟弟
NVIDIA ACE近段時間看到進步最快的DEMO,可以這么說,NVIDA ACE的進步速度幾乎與AI發展速度是看齊的。這是由Inworld AI與NVIDIA合作創建的一項技術演示,應用到名為Covert Protocol場景的DEMO中,說白了就是在一個場景內,放了3個NPC,每個NPC都由AI控制,可以進行語音互動。制作組只給NPC設定了人設,現場如何發揮,全看NPC自己,省時省力,因此DEMO迭代版本也很快。
新版本更新到了加載本地大模型完成中文識別和英語轉換功能,哪怕游戲是英語環境,每個NPC都能聽得懂你在說啥。
在這個DEMO中,玩家將扮演2062年的私家偵探馬庫斯·皮爾斯 (Marcus Pierce),致力于揭露生物技術公司大亨的邪惡陰謀。是的,就是找3個AI NPC,接上GPT 3.5,陪你一起玩劇本殺,不需要朋友,聯網就行!
新版本DEMO增加了額外的NPC,叫Jason Park,是門口James Park的弟弟。你要做的就是和這兩兄弟,以及Sophia Anderson、Diego Menendez進行互動,最終獲得Martin Davis的房間號。
這個DEMO由NVIDIA ACE和Inworld AI引擎提供支持的動態NPC交互,同時可交互的環境對象提供影響NPC交互的上下文,最終玩家決策會影響NPC的行為,有機會真的可以去嘗試一下。
當然,針對近期開展的Bilibili World 2024,NVIDIA還制作了數個品牌互動版本,比如ASUS、七彩虹什么的,你也可以和Jason Park聊聊產品,講道理,Jason Park的對產品的了解程度,不輸于產品經理。
特效小哥:這才是Stable Diffusion正確打開方式
特效小哥008又登場了。今年著名B站UP主特效小哥008帶來一部由生成式AI輔助制作的特效短片《特效小哥大戰系列之大戰河野華》,其中大量的工作是基于Stable Diffusion實現的,但不是我們印象中文生圖的Stable Diffusion,而是更為復雜的ComfyUI Stable Diffusion to 3D,長下面這個樣。
全是線框的ComfyUI可以更進一步描述Stable Diffusion生成的細節,從而以更快的速度獲得想要的效果。而實現的最初方式其實仍然簡單,只需要涂鴉即可完成,比如畫個鳥,畫只貓,在GeForce RTX 4090 D加持下,呈現只用了不到1秒鐘,完整的繪制思路也展現了出來,特效小哥008就可以再次基礎上不斷修改細節,最終獲得理想的效果。
這里的ComfyUI基于Stable Diffusion為3D模型制作了具有多種材質通道的高質量AI貼圖,同時輔以TripoSR實現生成式的3D模型構建,整個3D特效的前期工作流基于生成式AI工具替代了以往大量的手工繪畫和雕刻工作,極大提升了特效短片的制作效率,配合上TensorRT的Stable Diffusion運行加速,創意流暢度是以往無法想象的。
在此基礎上,生成的AI資產還可以通過RTX GPU加速Blender Cycles渲染器進行最終合成與渲染,Cycles渲染器使用NVIDIA OptiX加速,在AI計算下少量采樣的前提下,就可以為建模和動畫提供實時的交互方式,是目前Blender中最佳的渲染后端。
另外一個Stable Diffusion應用同樣也是基于ComfyUI,這里依靠普通的筆記本攝像頭,配合InstantID, IPAdapter和ControlNet等一系列細節控制技術,實現了將用戶形象通過簡單的攝像頭捕捉轉換為高清超級英雄形象的完整工作流,完成一個屬于自己的超人圖像,當然也可以根據自己的描述做更多調整。
AI PC雖然還處在初步的發展階段,但是RTX AI PC應用已經讓我們看到了更多可能性,先行一步的特效小哥008甚至已經開始利用AI盈利,趁手的AI PC顯然越早入手越好。如果有機會去Bilibili World 2024現場的同學,也可以多去嘗試一下各家展臺的RTX AI PC,興許真能幫你更多靈感,變身專業UP主。
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.