一、細(xì)節(jié),讓三維世界栩栩如生
明代匠人,于一粒核桃之上游刃有余,雕琢萬(wàn)千氣象。指尖方寸,承載著人類對(duì)微觀世界的終極挑戰(zhàn)。世紀(jì)流轉(zhuǎn),當(dāng) 2025 年“造好物”締造的第一支高解析力鏡頭劃破塵埃,人類才真正擁有了記錄這些微觀精妙的鑰匙。從指尖雕琢到科技凝視,對(duì)細(xì)節(jié)與精度的追求,是人類永不停息的自我突破。此刻,我們劃下新的刻度:Sparc3D——融合人工智能之力的超高精度 3D 生成大模型。它超越鏡頭的捕捉,以數(shù)字之名,把古人核雕的神技帶回現(xiàn)實(shí)。
那么,造好物究竟憑借何等妙手,掀起這場(chǎng)數(shù)字魔法的狂瀾?一切,皆源于“細(xì)節(jié)”。微觀紋路宛如匠人指尖的低語(yǔ),是三維模型的“靈魂之鑰”;若將其輕易剝離,所有的幾何體只剩下無(wú)神的空殼,難以觸動(dòng)人心。而過(guò)去的 3D 生成技術(shù),在數(shù)據(jù)流轉(zhuǎn)與壓縮的迷宮中,不斷丟失關(guān)鍵信息,留下的不過(guò)是粗糙的輪廓與單薄的肌理,讓建模師的匠心難以施展,效率亦受桎梏。如今,造好物傾力打造的 Sparc3D,以人工智能為鑿,以千億參數(shù)為砧,首創(chuàng)單圖送入、1536 分辨率雕刻級(jí) 3D 模型直出,精微肌理與微觀結(jié)構(gòu)得到前所未有的還原。權(quán)威測(cè)評(píng)表明,Sparc3D 的加持可將建模效率平均提升 90% 以上,之前數(shù)天的勞心傷神,現(xiàn)在只需幾個(gè)小時(shí),便能讓每一縷紋理都重獲生命。下面,就讓我們進(jìn)入硬核的技術(shù)解析。
二、模型原理介紹
Sparcubes:稀疏可變形網(wǎng)格立方體
原理:將輸入網(wǎng)格的符號(hào)距離函數(shù)(Signed Distance Function)與變形場(chǎng)統(tǒng)一散列到一個(gè)稀疏立方體結(jié)構(gòu)上。每個(gè)非空立方體單元(sparse cube)都攜帶該區(qū)域的細(xì)節(jié)信息,支持任意拓?fù)浔砻妗?/p>
優(yōu)勢(shì):避免了密集體素網(wǎng)格的立方級(jí)復(fù)雜度,稀疏結(jié)構(gòu)下保持高分辨率(15363)表面表達(dá);通過(guò)可微優(yōu)化接口,可端到端調(diào)整形狀,進(jìn)一步利用2D視覺監(jiān)督強(qiáng)化細(xì)節(jié)
2.Sparconv-VAE:稀疏卷積變分自編碼器
原理:我們?cè)O(shè)計(jì)了一種完全基于稀疏卷積網(wǎng)絡(luò)的,輸入輸出信息完全相同的3D VAE,無(wú)需將三維數(shù)據(jù)投影到 2D 或稠密體素,消除了潛在的模態(tài)轉(zhuǎn)換誤差。
優(yōu)勢(shì):幾乎無(wú)損的壓縮模型,重建誤差(Chamfer Distance)相比常規(guī)模型降低 40%。參數(shù)量小、稀疏計(jì)算減少 50% FLOPs,訓(xùn)練與推理成本顯著下降,同時(shí)為后續(xù)的生產(chǎn)模型提供高質(zhì)量潛空間表達(dá)。
3.大規(guī)模圖生3D模型訓(xùn)練
基于 Sparc3D 表達(dá),我們進(jìn)行了大規(guī)模生成模型(Flow Mathcing)訓(xùn)練:數(shù)據(jù)規(guī)模高達(dá)數(shù)百萬(wàn),在千卡集群上進(jìn)行了為期數(shù)周的訓(xùn)練。我們發(fā)現(xiàn)分辨率對(duì)細(xì)節(jié)的建模至關(guān)重要,于是我們訓(xùn)練出1536分辨率的大模型,達(dá)到了史無(wú)前例的細(xì)節(jié)生成能力。
三、效果展示
四、Math Magic—數(shù)字賦能現(xiàn)實(shí)之美
Math Magic 致力于打造數(shù)字世界與現(xiàn)實(shí)世界的橋梁,用頂尖 AI 技術(shù)推動(dòng)制造業(yè)升級(jí)。在 3D 生成領(lǐng)域,我們不斷突破表達(dá)瓶頸,讓數(shù)字模型更具真實(shí)世界的微觀質(zhì)感。Sparc3D的問(wèn)世,將進(jìn)一步提升產(chǎn)品建模效率、加速工業(yè)制造流程,并為游戲、影視等多場(chǎng)景應(yīng)用注入前所未有的細(xì)節(jié)生機(jī)。
Huggingface 體驗(yàn)鏈接:
論文鏈接:
更多案例請(qǐng)看項(xiàng)目主頁(yè):
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.