新智元報道
編輯:桃子 定慧
【新智元導讀】誰曾想,AI竟能實時生成GTA級大作。剛剛,谷歌、英偉達等機構聯手,震撼發布全球首款AI原生UGC游戲引擎——Mirage,沒有預設關卡,一句話即生游戲,超長十分鐘沉浸式體驗。
全球首款AI原生UGC游戲引擎誕生了!
今天,谷歌、英偉達、微軟等八大機構聯手,一同祭出了這款實時AI游戲引擎——Mirage。
傳送門:https://blog.dynamicslab.ai/
它不同于傳統游戲引擎,而是玩家想象力的「放大器」,任何人可以隨心所欲「造」游戲!
如今,團隊直接上線了兩個超燃的實時演示(試玩版本),一個是GTA風格的都市亂斗(Urban Chaos)。
游戲操作延用傳統風格,你可以自由走動,移動視角并且奔跑。
另一個是極限競速:地平線風格的海岸漂移(Coastal drift)。
AI原生UGC游戲的神奇之處就在于,你可以任意改變游戲內容。
比如在GTA風格的都市亂斗中,可以通過Enter鍵調出「世界控制」面板后,選擇「陰云密布大雨降至」。
游戲畫面馬上就從晴空萬里變成了黑云壓城。
比如,在上面的海岸漂移中,通過Enter鍵調出「世界控制」面板后,可以輸入「進入沙漠」。
然后游戲畫面就會從綠洲直接變成沙漠!簡直比《頭號玩家》還要一顆賽艇!
老黃曾預言,「用不了十年,我們就能看到游戲中每個像素都是由AI實時生成的」。
Mirage的登場,不僅讓這一愿景更近一步,也預示著未來的游戲產業將迎來巨變。
就連Hassabis也很看好Veo 3生成的視頻游戲
「動嘴」實時體驗GTA大作
10分鐘超長游玩
傳統游戲中,城市布局、任務劇情,一般都是事先設定好的,體驗終究有限。
Mirage徹底打破了這一局限,讓玩家在游戲過程中動態創造全新的體驗。
AI大神謝賽寧大贊:太酷了
現在,僅通過自然語言、鍵盤輸入,或是游戲柄,玩家即可請求一條逃生的小象、生成一輛載具,或即時擴展的城市天際線。
舉個栗子,來一場傾盆大雨,動動嘴皮子就成了。
再比如,玩超級馬里奧時,一句「出現磚塊」,Mirage就會為你實時生成。
可以看到,游戲會立即給出響應,將生成的元素,無縫融合到正在進行的模擬中。
這個AI游戲世界不僅僅是可交互的,還能與玩家「共同演化」。
此前,初創公司Decart和Etched上線的實時神經游戲引擎Oasis,實現了20幀/秒的零延遲交互。
這一次,Mirage的強大能力,直接掀翻了天花板,究竟有多硬核?
· 16 FPS流暢可玩:在標準清晰度下,享受實時交互體驗。
· 動態用戶生成內容(UGC):玩家可以用自然語言指令改變世界。
· 更長游戲時間:Mirage可生成長達數分鐘、且視覺效果連貫的交互式游戲體驗。
· 云端串流:無需下載,隨時隨地享受即時跨平臺游戲。
· 無限可玩性:每一次游戲,都是獨一無二的體驗。
· 多模態操控:支持文本、鍵盤及手柄輸入。
從今天起,玩家可以徹底告別千篇一律的預設關卡,在Mirage中無限編輯、擴展,甚至從零打造全新的世界。
更令人驚艷的是,Mirage的畫面和操作感,直逼GTA、Forza風格的沉浸式體驗,遠超「我的世界」、「毀滅戰士」那樣簡約化的風格。
它還能支持5-10分鐘,甚至更長時間的持續游玩,打破了短短幾秒的片刻體驗。
不論是賽車游戲、角色扮演游戲,還是平臺跳躍游戲,Mirage都能一鍵生成。
接下來,一起看看Mirage如何重塑UGC 2.0。
UGC 2.0
生成式游戲崛起
什么是生成式游戲?
就是游戲的未來并非由專家設計師設計,而是完全靠你的想象實時生成、實時游戲。
比如你輸入「一輛黃色計程車突然從街角出現,出現在主角右邊」。
然后游戲畫面中就會實時「生成」一輛描述中的黃色計程車。
再比如輸入「一輛灰色轎車從街道右邊出現,并停在主角身邊」,然后你就會發現游戲畫面中「真的出現」一輛灰色轎車。
你甚至可以跳到轎車的車頂。
傳統游戲,不論是休閑游戲還是開放世界的3A大作,都是預先創作好的。
城市布局、任務劇情都是事先設定好的,玩家的體驗最終有限。
Mirage打破了這一界限,通過自然語言和控制器,玩家可以如同開了「外掛」一般,可以隨時隨地按照想象擴展游戲。
比如請求一條逃生的小巷、或者生成一輛載具。
MIRAGE可以生成各種類型的游戲——從競速游戲到角色扮演游戲再到平臺動作游戲。
你可以駕駛未來戰機飛行于空曠的末日世界。
可以漫步于曼哈頓街頭,體驗GTA5的主角日常。
或者是地平線風格的賽車游戲。
或者是賽艇游戲。
你甚至可以生成一個全新的馬里奧游戲。
賽車游戲也不在話下,限量版F1風格蘭博基尼你值得擁有。
這就是AI原生UGC 2.0,在這里,你就是造物主。
在這里,任何人都可以通過簡單的文本提示生成屬于自己的游戲。
在這里,玩家可以在游戲過程中實時創造、進化并重塑游戲內容。
并且,每一次體驗都是獨特、動態且無需預先編寫腳本的。
背后技術
「世界模型」立大功
Mirage的核心是一個實時的交互式「世界模型」,基于Transformer和擴散模型完成訓練。
該框架整合了多項關鍵創新,由此能夠生成可控、高保真的視頻游戲序列。
Mirage的強大體驗,是建立在訓練基礎之上。
最關鍵因素,便是從互聯網上收集的大規模多樣化的游戲數據,提供了足夠的廣度來捕捉各種游戲機制和風格。
為此,研究團隊開發了一款專用的數據記錄工具,用于捕捉高質量的人類錄制的游戲互動。
這些精心整理的會話,通過細微且高保真的示例豐富了數據集,對于訓練模型理解復雜的玩家行為和情境化游戲邏輯至關重要。
然后,收集和記錄的數據隨后會被輸入到一個「垂直訓練」流程中——這是一種專注于游戲領域的特定領域訓練方法。
這使得模型能夠深入內化游戲世界的規則、系統模式和交互動態。
最終,便得到了一個能夠生成連貫、真實且靈活的游戲內容的模型,突破了傳統預設游戲的限制。
「交互式生成」與「實時控制」完美融合
Mirage將幀級提示詞處理集成至其核心,重新定義了實時交互。
這使得玩家輸入的鍵盤指令和自然語言提示詞,都能在游戲過程中被即時解析。
對于玩家來說,通過云游戲實現了隨處可玩:
· 動態輸入系統:Mirage以超低延遲處理玩家的輸入(主要通過鍵盤和文本),實現近乎即時的響應。
· 實時輸出:視覺更新通過一個全雙工通信通道流回瀏覽器,輸入與輸出并行處理,從而消除延遲,確保流暢交互。
其底層技術架構是一套定制化的因果Transformer模型,并通過以下技術實現了增強。
其中包括,專門的視覺編碼器、經過優化的位置編碼、專為長時間交互序列而優化的結構。
值得一提的是,Mirage繼承了大模型和擴散模型的優勢,支持生成連貫的高質量內容。
這里,研究團隊對擴散模型組件采用了先進的蒸餾策略,以同時確保生成速度與內容質量。
玩家可隨時通過自然語言重塑游戲環境,觸發世界的即時更新。
由KV緩存支持的長上下文窗口,能夠確保即便世界在實時演變,視覺效果也能保持連貫一致。
八大頂尖機構聯手
造出最強AI游戲引擎
Mirage由一支技術深厚且富有創造力的團隊打造,團隊成員包括了AI研究人員、工程師和設計師。
他們來自谷歌、英偉達、Amazon、SEGA、蘋果、微軟、卡內基梅隆大學和加州大學圣地亞哥分校。
通過UGC 2.0,Mirage致力于推動生成式世界模型的邊界——每一次邊界的拓展都將顛覆我們的想象力。
同時,生成式玩法不僅僅是一個功能,更是一種全新的媒介。
從報紙、廣播到電視、手機,再到3A大作和4K視頻,人類的媒介正在不斷進化。
沃頓商學院CS教授Ethan Mollick實測后表示,Mirage雖未完全到位,但已取得了進展。
還有網友被Mirage實時生成效果徹底驚艷了——這簡直像PS2!
Mirage指向一個全新的未來,在那里游戲無需下載或者等待設計——它們將被想象、被提示、被生成,并被我們親身體驗。
一切才剛剛開始。
參考資料:
https://x.com/ZhitingHu/status/1940467415303049327
https://blog.dynamicslab.ai/
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.