·性能至強(qiáng)
作為專為大模型推理業(yè)務(wù)創(chuàng)新設(shè)計(jì)的高吞吐服務(wù)器,億萬克G882N7+支持2顆第四代/第五代英特爾?至強(qiáng)?可擴(kuò)展處理器,多核高主頻CPU適合處理數(shù)據(jù)預(yù)處理、模型并行任務(wù)調(diào)度等場(chǎng)景。支持H100/H800/H20 8-GPU NVLink模組,單卡FP16算力高達(dá) 1979 TFLOPS,8卡通過NVLink互聯(lián)可實(shí)現(xiàn)高效并行計(jì)算,顯存總量640GB(H100)或768GB(H20),完全滿足千億參數(shù)模型的分布式推理/訓(xùn)練需求。
·容量至大
3TB大內(nèi)存容量,可緩存海量訓(xùn)練數(shù)據(jù),減少I/O瓶頸,DDR5高帶寬(5600 MT/s)加速CPU與GPU間數(shù)據(jù)傳輸。NVMe SSD提供超高IOPS(百萬級(jí))和低延遲,適合快速加載TB級(jí)數(shù)據(jù)集,30TB固態(tài)硬盤容量可容納多版本模型參數(shù)(如FP16/INT8量化版)及日志文件。
目前,億萬克G882N7+服務(wù)器已完成DeepSeek的適配優(yōu)化工作,以滿配高能,為企業(yè)級(jí)客戶構(gòu)建千億級(jí)智算AI算力基座!
歡迎致電,申請(qǐng)產(chǎn)品免費(fèi)試用名額!
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.