AI應用無疑已經成為當下最熱門的話題,動輒數百元的在線AI服務對隱私和成本似乎都沒有那么友好。有沒有一些利用現有資源,不花錢就能免費獲得的功能?NVIDIA的回答是,還真有,只要你有GeForce RTX 30或者GeForce RTX 40系列GPU就行。
就在近期進行,我們有幸參加了NVIDIA RTX for AI技術品鑒會上,除了展示CES 2024期間上線的DEMO,更多生成式AI加速,中文化本地AI應用部署也已經成為可能,原來我們手中的GeForce RTX GPU,還可以做到這些功能。
AIGC創作:更快更智能
AI生成式創作首先少不了Stable Diffusion應用。作為當下最主流的圖生圖、文生圖應用之一,GeForce RTX GPU從Stable Diffusion 1.0版本到最新的SDXL,都給做了最充足的適配,每一款GPU在加速計算之前,都可以進行針對性的優化,確保Stable Diffusion可以充分的利用CUDA Core、Tensor Core以及顯存資源。
以現場展示DEMO的GeForce RTX 4090 D為例,一張高清分辨率文生圖流程,歷經圖片生成、分辨率提升過程,憑借著24GB GDDR6X超大顯存以及AD102核心,一張圖片生成的時間僅需要幾秒鐘,這是再快的CPU也無法比擬的。
在現場NVIDIA使用了Stable Diffusion XL作為案例,通過TensorRT加速,可以讓Stable Diffusion XL在RTX GPU上獲得更快的加速效果,將RTX GPU性能提升2倍以上。TensorRT本來是應用在數據中心的技術,通過對Stable Diffusion的U-Net模型的加速矩陣乘法累加運算,從而達到圖像快速生成的效果。現在這項技術已經可以在RTX GPU上使用,意味著每一臺擁有RTX GPU的PC也已經可以輕松通過TensorRT實現更快的加速效果。
現場演示的青龍生成,幾乎是在一瞬間完成了圖像生成和分辨率提升的,這樣效率對于熟練的Stable Diffusion用戶而言非常友好。利用RTX GPU的高新更表現,設置連續生成數十張AIGC內容,在相同風格和思路下尋找更多的可能性。
當然這還遠遠不夠,利用PC的攝像頭現場抓去照片,通過需求識別出圖片中的人物輪廓或者景深,再讓Stable Diffusion在極短的時間內生成數張不同風格的圖生圖內容。
憑借著Stable Diffusion開源的優越性,Stable Diffusion也衍生出了諸如ComfyUI的擴展應用。同樣是基于Stable Diffusion,但每一個關鍵詞設置更為直觀,并且依附于RTX GPU在后臺的快速運算。每一次關鍵詞的修改,圖片都會在一瞬間生成,完全沒有任何等待的時間,這是非常夸張的。
NVIDIA ACE:給NPC人設,AI來演
在CES 2024上亮相的NVIDIA ACE (Avatar Cloud Engine)也同樣出現在了NVIDIA RTX for AI品鑒會現場,所不同的是,在相隔2個月后NVIDIA ACE再度獲得了升級,現在不僅可以聽得懂英文和日語,中文對話和發音也可以實現了。
NVIDIA ACE具體來說是一款借助生成式AI為NPC創作更多交互可能性的技術,現場這項名為NVIDIA Kairos ACE demo融合了NVIDIA與Convai合作的自動語音識別技術ACE Production Microservices,通過話筒進行自然語音對話,就可以從NPC身上獲取信息和物品,這是以前游戲中都不敢想象的。
NVIDIA ACE厲害的重點在于自然,無論你對NPC說什么內容,NVIDIA ACE都會讓NPC依照預定人設對你說的話進行回答,哪怕你的提問不著邊際,NPC也能具備高情商的ChatGPT一樣,可以顧及游戲劇情需要和你的感受。更確切的說,NVIDIA ACE讓NPC看起來真的像現實世界中由真人在劇本殺中扮演的NPC,相當帶勁。
比如你對著餐廳店長說餓了,有什么可以吃的。店長會向你推薦拉面,如果你認可,對方就會走到后廚為你準備飲料、拉面。甚至,如果你覺得店內的氛圍不夠,還可以讓店長把店鋪的燈光再關掉一些,店長會不耐煩的絮絮叨叨,但還是按照玩家的要求去后臺關燈。
整個過程NVIDIA ACE對中文語境的理解已經可以對答如流,雖然中文語音發音仍然是基于英語語境,但已經像模像樣。要知道這DEMO仍然屬于最初的測試階段,如果往后繼續升級,相信還會有更好的表現。如果真的能應用在游戲中,以后開放世界的NPC,真的不再是簡單幾句臺詞和在街上無所事事行走那么簡單了。
Chat with RTX:私人助理唾手可得
Chat with RTX是NVIDIA在近期發布,類似于本地離線運行的ChatGPT助手。它的特點就是利用GPU加速實現完全的本地運行,做到信息與隱私的安全。當然,如果有必要,也可以用Chat with RTX實現一些聯網操作,從而形成一套本地+在線的混合大模型加速的應用。
Chat with RTX中的模型并非來自NVIDIA,而是來自GitHub等開源的大模型,比如來自Meta的Llama 2。Chat with RTX更像是一個大模型打包集合Demo,為用戶本地AI智能助手應用展示更多可能性。
其中一個最大特點就是信息整理。比如整理上市公司財報,數百頁的財報內容可以直接放入Chat with RTX中,Chat with RTX在瞬間就可以對財報完成理解,并回答任何你對財報的疑問,以及提供信息來源,具體到哪個報表,哪一頁內容。
同樣的,你也可以將網絡上整理到的旅游信息扔進Chat with RTX,讓它幫你做一個目的地的旅游規劃。只要是你想整理的信息,只要提供對應的內容,Chat with RTX就能在一瞬間幫你解決信息整理的過程,非常方便。
有意思的是,信息來源可以是網頁、PDF或者DOCX文檔,大多數的文字內容格式,Chat with RTX似乎都可以提供很好的兼容性。當然,與ChatGPT一樣,資料的真實性Chat with RTX是不能判斷的。
還有一招:NVIDIA App
所有NVIDIA GeForce用戶在安裝驅動的時候都可能遇到過選擇困難癥,默認的NVIDIA控制面板UI設計已經有差不多20年歷史,與現在主流審美不符。但GeForce Experience的設置功能沒有NVIDIA控制面板那么全面。現在NVIDIA終于邁出了那關鍵一步,就是將NVIDIA控制面板和GeForce Experience融合在一起,變成NVIDIA App。
類似于藍廠和紅廠只有一套驅動設置界面,現在前往GeForce Experience下載頁面,就已經能夠看到NVIDIA App測試版的下載鏈接。不過這項工作不會一蹴而就,在未來一段時間,新版和舊版還會共存,直至NVIDIA App已經能夠同時勝任NVIDIA控制面板和GeForce Experience的功能,最終將兩者代替。
這意味著未來只需要安裝一套NVIDIA App,就能同時獲得完整的NVIDIA控制面板設置,以及GeForce Experience帶來的游戲增強體驗。
在現場演示的天選筆記本上,我們可以看到NVIDIA App已經可以很好的運行,如果你有興趣,也可以前往NVIDIA官網下載這套應用,看看是不是你喜歡的菜。
最后:游戲與AI進階時
再過一周左右時間,GDC和GTC的召開意味著GPU、顯示技術、AI都會再度向上進階一級。這次NVIDIA RTX for AI技術品鑒會展示的DEMO也不過是NVIDIA向應用層面加速AI推廣的冰山一角,很快我們就會看到NVIDIA ACE、AIGC等技術還會在短時間內發生質變升級,并很快投入到真正的游戲和應用中。
并且不能否認的是,所有的AI加速環境中,GeForce RTX GPU都是最能優秀兼容性和高性能的那款產品,放眼友商,還暫時是沒有敵手的。而對于我們普通玩家而言,只需要記得準備好GeForce RTX 40系列GPU,未來幾波AI升級浪潮誕生的熱門應用,一定都可以運行得行云流水。
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.