99国产精品欲av蜜臀,可以直接免费观看的AV网站,gogogo高清免费完整版,啊灬啊灬啊灬免费毛片

網(wǎng)易首頁 > 網(wǎng)易號 > 正文 申請入駐

同質化的GPU云市場,誰能逃離內卷?

0
分享至



“一個聰明人從敵人那里得到的東西,比從一個傻瓜朋友那里得到的東西更多。”

——哲學家格拉西安

這句格言,正在AI領域被現(xiàn)實驗證。美國的限制政策總會告訴我們,哪些東西是發(fā)展AI至關重要的。

2024年10月,美國商務部再次升級制裁,限制中國實體訪問美國的云服務,理由是“防止利用美國基礎設施訓練AI模型”。這標志著美國對華算力基礎設施的“雙管齊下”:先斷GPU芯片,再封云服務,最終目標是讓中國AI陷入算力斷崖。

有讀者會問,DeepSeek降低了單模型算力需求,把英偉達股價都打下來了,怎么AI算力仍然短缺呢?



一方面是總量在增長。正如杰文斯悖論所說,技術進步降低了使用成本時,資源的總消耗量反而會增加。比如燃油效率提高了更省油,但隨著開車變得便宜,人們就會更多選擇開車,結果導致汽油的總消耗量增加。AI也是如此,模型門檻下降導致智能化應用多了,總算力需求也就更大了。

此外,還跟算力集群的利用率有關。一位銀行總工程師分享到,自家搭建的混合異構算力平臺,高峰期算力集群利用率能達到60%就算優(yōu)秀了,花大價錢采購的算卡資源,很多都被浪費或閑置了,加上配套系統(tǒng)與運維成本,整個資金投入非常大。

既然自建算力集群買不到卡、成本高,從云端獲取算力的GPU云服務,就成了絕大多數(shù)企業(yè)用好、用活大模型的最佳選擇。

那么,GPU云服務作為AI算力的另一根支柱,中國準備好了嗎?



從云端獲取算力,理想很豐滿,但現(xiàn)實很骨感。GPU云服務還沒有被企業(yè)普遍接受。一位金融從業(yè)者就告訴我們,整個金融行業(yè)對GPU 云的認知還比較模糊,大家習慣了傳統(tǒng)的硬件采購模式,對云服務的接受度并不高。

為什么不高?這有兩個原因:

一是同質化嚴重。對比市面上的GPU云解決方案,會發(fā)現(xiàn)算力層、平臺層都高度同質化,采用的GPU芯片大同小異,平臺功能也差不多。以至于有人覺得GPU云服務商提供的軟件沒什么太大價值。結果就是GPU云市場,目前的競爭主要是卷低價。

二是創(chuàng)新不足。同質化并不意味著GPU云服務的痛點和挑戰(zhàn)都已經(jīng)被解決了,實際上,同質化正是創(chuàng)新不足的表現(xiàn)。比如說,隨著大模型的參數(shù)規(guī)模擴大,一個千卡集群的百P算力,訓一個類Sora大模型就被占滿了,其他客戶需要算力,就得擴大集群規(guī)模,但AI芯片是很敏感的,從千卡到萬卡、超萬卡,故障率和運維難度也快速上升,怎么保證集群的穩(wěn)定性,不能動不動就中斷重寫checkpoint?



花了大價錢買的GPU卡,結果有一半都在“摸魚”,怎么讓資源管理更精益,投資不浪費?

算卡供應鏈的不穩(wěn)定,很多集群的架構不同、批次不同,無法合池訓練,存在資源墻怎么打破?

國產(chǎn)芯片的適配難,新模型的訓練時長比英偉達方案多出好幾倍,一直沿用的訓練推理一體化流程,在異構算力環(huán)境下漏洞百出,又該怎么辦?

不難看到,不是行業(yè)用戶不想用GPU云服務,而是市面上的解決方案都趨于同質化,過早開始卷價格。這種情況,與內卷化的定義異常契合。就像農(nóng)業(yè)發(fā)展到一個確定形式之后,便停滯不前或無法向更高級轉化。

GPU云市場,還處于方興未艾的發(fā)展初期,各行各業(yè)都需要上云用算來進行AI訓推,有巨大的市場空間等待打開,不應過早跌入同質化、內卷化的泥潭。



但要打破內卷,就得拿出有壁壘的差異化解決方案,讓GPU云算力真正降本增效,從而帶動企業(yè)用戶的增長,以及整個GPU云的產(chǎn)業(yè)升級,就像一塊耕地,通過優(yōu)化種植技術和精耕細作,進一步提高糧食畝產(chǎn)量,從而避免卷入“谷賤傷農(nóng)”的價格戰(zhàn)內卷。

向技術要答案,一直是百度的特點。AI時代,百度智能云也憑借AI基礎設施和技術能力在云市場異軍突起,率先點亮了國產(chǎn)三萬卡GPU集群,并且實現(xiàn)了幾乎無損的混合訓練能力,集群利用率高達95%以上。憑借GPU云領域的突出能力,百度智能云成為超半數(shù)央企的選擇。

我們就以百度智能云為例,拆解一下GPU云逃離內卷的技術密碼。



破解GPU云市場的內卷難題,必然要改變傳統(tǒng)集群規(guī)模拓展難、故障率高、資源利用率低等問題,那就要從基礎設施下功夫。

具體來說,百度智能云以技術為工具,對GPU集群進行了三重改造。讓GPU集群從小農(nóng)經(jīng)濟式的粗放經(jīng)營,變成現(xiàn)代農(nóng)場一樣的規(guī)模化、集約化、精益化生產(chǎn)模式。

第一重改造:規(guī)模化,釋放超萬卡集群的澎湃算力。

“深度思考的大模型,業(yè)務用著不錯,下面要全集團推廣,你們盡快給算力擴容吧”,進入2025年,大模型上量成了IT人的一大挑戰(zhàn)。因為集群規(guī)模擴大一倍,故障率能飆升好幾倍,而實際運算效率卻出現(xiàn)了邊際遞減。如果集群是由不同城市的小規(guī)模集群互聯(lián)來構建的,那資源性能損耗就更嚴重了,數(shù)據(jù)時延也會讓在線推理服務的體驗大打折扣。如果AI思考一次就得十幾分鐘,員工用起來不耐煩,CTO怎么能不著急上火。

所以,百度智能云在構建規(guī)模化GPU算力集群,面臨的首要技術挑戰(zhàn),就是如何提高集群的穩(wěn)定性,降低故障率,給性能調優(yōu)。



解題思路,就是軟硬協(xié)同。有點類似于NVlink+ CUDA聯(lián)手,充分釋放N卡算力。那百度智能云靠的就是百舸。百度百舸是專為AI計算設計的高性能算力平臺,讓多個芯片、多個集群都用“普通話”,實現(xiàn)跨芯片“交流”。

硬件資源層,百舸設計了一套新的物理網(wǎng)絡架構,就像是城市里精心規(guī)劃的高效路線,新一代的HPN網(wǎng)絡規(guī)模上支持10萬卡,可同時容納十萬卡并行訓練,這就為計算資源的高效運行提供了有力保障,讓AI模型訓起來更快更穩(wěn)定。

集群組件層,百舸自研的集合通信庫BCCL,可以實現(xiàn)GPU、昆侖芯等標準RDMA設備的互聯(lián)互通,使得通信效果達到最優(yōu)。以前沒有統(tǒng)一溝通方式的時候,不同芯片互不打通,常常出現(xiàn)混亂,那協(xié)同工作效率自然就很低了。BCC制定了一套統(tǒng)一的通行規(guī)則,就可以讓芯片高效協(xié)作,加上自適應并行策略搜索,自動規(guī)劃出最佳方案,就能讓各種硬件充分發(fā)揮作用,提升多芯混合訓練任務的整體效能。

訓推加速層,百舸在AI加速套件AIAK-LLM中構建了Accelerator抽象層,屏蔽硬件差異,相當于為多個集群開辟高速路,快速通信,讓各種硬件都能充分發(fā)揮作用,高效協(xié)作,由此來構建極致規(guī)模、極致高密和極致互聯(lián)的GPU集群。



想象一下,當企業(yè)使用萬卡、超萬卡集群時,就像一個源源不斷供給養(yǎng)分的算力土壤,無論是金融機構處理海量交易數(shù)據(jù),還是運行復雜的科學計算模型,或者是AI智能體實時響應客戶需求,都能游刃有余。

目前,百舸已經(jīng)具備了成熟的10萬卡集群部署和管理能力,在橫跨幾十公里的集群上,百舸可以把單一訓練任務的性能折損控制在4%以內,也讓百度智能云成為GPU云廠商中納管超大規(guī)模集群的一個標桿。

第二重改造:精益化,PD分離讓AI應用隨時在線。

如今,企業(yè)對算力的需求發(fā)生了巨大轉變,從過去側重于模型訓練,逐漸轉向更注重實時性的推理和后訓練階段,有點像城市交通發(fā)展到了一定階段,新路(訓練)就建得少了,取而代之的是防止車流擁堵(推理優(yōu)化)。

無論是B端用戶還是C端用戶,如果大模型思考十幾秒才給回應,用戶都會不耐煩直接退出,這就是“首token延遲”。為了盡可能滿足用戶“即時反饋”的嚴苛要求,就迫使模型廠商絞盡腦汁。不能忽略的是,算力基礎設施的優(yōu)化,就像是把路鋪平、修上護欄,提升系統(tǒng)的處理能力和并發(fā)效率,從而讓在線服務像上高速一樣順暢運行,大大降低延遲率。



PD分離加速技術成為云廠商們競相展示的“王牌”,而百度智能云的PD分離式推理基礎設施,憑借全局優(yōu)化能力脫穎而出。

物理網(wǎng)絡層面,百度智能云打造了HPN(High-Performance Network)高性能網(wǎng)絡集群,擁有自適應路由算法,像智能導航一樣,避免了大規(guī)模數(shù)據(jù)傳輸時(如Alltoall)的流量集中問題。全新的拓撲結構,如同重新規(guī)劃的城市路網(wǎng),降低通信瓶頸,使帶寬有效性達到90%以上,讓交換機轉發(fā)延遲大大降低,集群傳輸又快又穩(wěn)。

流量管理層面,百度智能云自研的高性能KV Cache傳輸庫,為高優(yōu)先級隊列預留帶寬,相當于“特殊車輛優(yōu)先通行通道”;分層傳輸設計支持多層KV Cache復用,相當于潮汐車道,根據(jù)數(shù)據(jù)流量靈活調整傳輸通道,提升通行效率,并且訓推任務互不干擾,貨車轎車“各走各道”,實現(xiàn)了DCN彈性RDMA滿帶寬傳輸,讓數(shù)據(jù)高效流通。



通信組件層面,百度智能通過Alltoall算子優(yōu)化和動態(tài)冗余專家編排,優(yōu)化計算流與通信流,確保集群中所有GPU通信時間一致,顯著提升吞吐量和性能。

以往企業(yè)使用大模型時,常因算力瓶頸、數(shù)據(jù)傳輸慢等問題受限,如同灌溉管道不暢影響了養(yǎng)分輸送。而百度智能云將網(wǎng)絡基礎設施、通信組件與上層業(yè)務深度融合,精心修建了一套高效的“算力管網(wǎng)”,可以讓數(shù)據(jù)、算力在不同業(yè)務場景間快速流動,能夠助力各行各業(yè)快速應用大模型,解決企業(yè)智能化轉型的當務之急。

第三重改造:多元化,一云多芯筑起算力可靠圍墻。

限卡又限云,已經(jīng)是美國遏制中國AI發(fā)展的明牌。完全依賴英偉達風險太大了,國際形勢變化頻繁,供應鏈隨時可能被卡脖子,企業(yè)構建算力集群,不能押注在單一芯片,會考慮一云多芯。但采購國產(chǎn)芯片分散風險,異構芯片納管與并行計算效率低,不同類型芯片之間協(xié)同工作困難重重,算力資源浪費嚴重。

在國內算卡供應緊張的當下,讓多樣化芯片能夠協(xié)同訓練,意義不用多說。“一云多芯混訓”的能力,也讓百度智能云成為多數(shù)企業(yè)GPU云的選擇,比如長安汽車。

走進長安汽車智算中心,就像是一座算力工廠,依靠百舸平臺與長安汽車自研的 “星環(huán)平臺”,將算力資源發(fā)揮到極致。過去,服務器像低效運轉的老舊生產(chǎn)線,大量算力被閑置浪費。如今,百舸升級的智能調度系統(tǒng),集群平均算力使用率飆升至90%,綜合資源利用率提升50%。



再比如某個頭部城商行。對銀行來說,業(yè)務可持續(xù)性至關重要,如果用戶訪問不了系統(tǒng)、辦不了業(yè)務是重大事故。既要自主可控的異構算力集群,又要穩(wěn)定可靠的服務保障,對城商行的基礎設施提出了巨大挑戰(zhàn)。該城商行與百度智能云合作,通過異構平臺在算力感知的情況下,進行統(tǒng)一調度,讓不同芯片不再“打群架”,可以被混合管理、混合使用,從而兼顧了算力安全與業(yè)務穩(wěn)定。

再到百度自建的國產(chǎn)昆侖芯 P800 大型單一集群里一看,資源利用率更是高達 98%,讓每一張GPU都物盡其用。

原來,單一服務器最多容納8張計算卡,而昆侖芯超節(jié)點技術可以將64張昆侖芯P800集中于單機柜,并且通信效率堪比單一機型。跨集群層面,百度百舸打通集群內的網(wǎng)絡墻,實現(xiàn)異構芯片互聯(lián)互通。通過accelerator 抽象層,屏蔽底層芯片差異,通過統(tǒng)一接口實現(xiàn)異構芯片的“即插即用”;采用自適應并行工具,找到最優(yōu)的切分策略,根據(jù)芯片性能自動分配任務,減少性能損失。最終實現(xiàn)了近乎無損的“萬卡級多芯混訓”能力。



在萬卡規(guī)模上,百舸可將兩種芯片混合訓練,目前一共支持 18 種以上芯片類型,徹底解決了一云多芯混訓的復雜難題。

如今,經(jīng)過規(guī)模化、精益化、多元化的三重技術改造,GPU云已從零散低效的“算力作坊”,升級為高效精益的“現(xiàn)代農(nóng)場”。百度智能云也憑借在GPU云服務領域的卓越表現(xiàn),成為頭部廠商中增速最快的云服務廠商。IDC最新發(fā)布的《中國智算專業(yè)服務市場報告》中,百度智能云憑借AI解決方案實施服務,成為行業(yè)第一,領跑市場。

這說明,依靠技術創(chuàng)新,GPU云廠商可以逃離內卷,為行業(yè)和客戶創(chuàng)造差異化價值,讓GPU云服務在企業(yè)級市場煥發(fā)出充沛的價值。



堅持“技術精耕”,百度智能云走了一條向技術要效益、向技術要價值的良性發(fā)展之路。不僅讓其在GPU云市場建立差異化競爭的壁壘,也為整個行業(yè)從粗放走向精益,從內卷走向高質量發(fā)展,提供了一個很好的參考樣本。

那我們不禁要問,為什么百度智能云能擺脫內卷的漩渦?是什么讓百度智能云有所不同?

一方面,是百度的技術基因,經(jīng)過多年在AI領域的發(fā)展,百度及百度智能云已經(jīng)打造了一系列高度適配AI業(yè)務、具有獨特創(chuàng)新能力的“尖刀型”技術,有力地解決GPU云集群建設中的痛點與難點。



另一方面,是百度智能云的發(fā)展路徑清晰,向技術要答案、不走內卷化之路的戰(zhàn)略選擇是明確的,這也決定了百度智能云必須在技術上下苦功、登天梯。面對需求側的企業(yè)客戶,以供給側的高質量GPU云服務,回應AI規(guī)模應用的復雜算力需求;面對云市場的競爭對手,以技術領導力帶動GPU云產(chǎn)業(yè)的高質量發(fā)展,避免裸金屬的紅海價格戰(zhàn),以百舸為核心的能力與服務,開拓更大的價值空間。

GPU云的未來,不是卷“誰更便宜”,而是看“誰敢創(chuàng)新”。真正的技術領導者,將贏下這場AI算力革命的主導權。



聲明:個人原創(chuàng),僅供參考

特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關推薦
熱點推薦
六連勝5分領跑!南通2-1鹽城 程鑫精彩抽射破門鹽城首敗仍居第2

六連勝5分領跑!南通2-1鹽城 程鑫精彩抽射破門鹽城首敗仍居第2

直播吧
2025-07-19 21:43:15
時機已到,該收拾馮德萊恩了!中國一道禁令封鎖,必須殺雞儆猴

時機已到,該收拾馮德萊恩了!中國一道禁令封鎖,必須殺雞儆猴

視聽故事局
2025-07-19 16:57:41
驚爆!敘利亞政府軍血洗醫(yī)院,以色列怒炸大馬士革震驚世界!

驚爆!敘利亞政府軍血洗醫(yī)院,以色列怒炸大馬士革震驚世界!

虎哥閑聊
2025-07-18 15:56:22
老干部是改革的最大阻力

老干部是改革的最大阻力

求實處
2025-07-20 00:59:18
男孩被塞后備箱后續(xù)!親媽曝光與前公公聊天記錄,毀三觀

男孩被塞后備箱后續(xù)!親媽曝光與前公公聊天記錄,毀三觀

魔都姐姐雜談
2025-07-19 11:41:24
娃哈哈黑幕尾巴露出來了:國資股份長達24年未分紅,某領導一年分紅36萬元

娃哈哈黑幕尾巴露出來了:國資股份長達24年未分紅,某領導一年分紅36萬元

雪中風車
2025-07-19 19:15:49
網(wǎng)紅女騎手車禍去世,年僅35歲!知情人:頭盔沒戴好

網(wǎng)紅女騎手車禍去世,年僅35歲!知情人:頭盔沒戴好

揚子晚報
2025-07-19 20:28:22
跌慘了!單價從22000元到5700元,南京一樓盤淪落到2折銷售…

跌慘了!單價從22000元到5700元,南京一樓盤淪落到2折銷售…

火山詩話
2025-07-19 18:34:40
中國女籃輸球主因:三分6-16外線狂輸30分 宮魯鳴大練三分成空談

中國女籃輸球主因:三分6-16外線狂輸30分 宮魯鳴大練三分成空談

醉臥浮生
2025-07-19 21:42:01
輸日本發(fā)布會!宮魯鳴直指雙塔防守問題,韓旭自責將爭取海外機會

輸日本發(fā)布會!宮魯鳴直指雙塔防守問題,韓旭自責將爭取海外機會

籃球資訊達人
2025-07-19 22:04:40
7月19日特訊!臺島周邊67艦機包圍,發(fā)生激烈對峙,臺當局慌了

7月19日特訊!臺島周邊67艦機包圍,發(fā)生激烈對峙,臺當局慌了

智觀科技
2025-07-19 10:50:09
《你行!你上!》首映口碑崩塌,各種理由出奇一致:掛羊頭賣狗肉

《你行!你上!》首映口碑崩塌,各種理由出奇一致:掛羊頭賣狗肉

洲洲影視娛評
2025-07-19 19:14:11
自責!韓旭19中7后,淚灑發(fā)布會現(xiàn)場,親承會爭取海外打球機會!

自責!韓旭19中7后,淚灑發(fā)布會現(xiàn)場,親承會爭取海外打球機會!

籃球資訊達人
2025-07-19 21:49:51
水質恢復之后不少市民用紗布測試,放幾小時后紗布依舊變黑

水質恢復之后不少市民用紗布測試,放幾小時后紗布依舊變黑

映射生活的身影
2025-07-19 18:43:38
宗慶后家族內訌升級!宗馥莉霸氣反擊,更換包裝,一語雙關情商高

宗慶后家族內訌升級!宗馥莉霸氣反擊,更換包裝,一語雙關情商高

180視角
2025-07-18 08:42:15
印度的噩夢來了,建雅魯藏布江電站開建,相當于3個三峽

印度的噩夢來了,建雅魯藏布江電站開建,相當于3個三峽

影孖看世界
2025-07-19 23:07:55
103歲奶奶還在世,是第一位繼承人!杜建英魚死網(wǎng)破目的逐漸清晰

103歲奶奶還在世,是第一位繼承人!杜建英魚死網(wǎng)破目的逐漸清晰

大魚簡科
2025-07-19 21:35:08
17秒4枚鉆地彈!以色列“斬首”大馬士革,朱拉尼24小時從勝到敗

17秒4枚鉆地彈!以色列“斬首”大馬士革,朱拉尼24小時從勝到敗

流年拾光
2025-07-19 17:39:18
已證實!他被撕票,年僅24歲

已證實!他被撕票,年僅24歲

昆明信息港
2025-07-19 18:36:54
炸裂!杜建英被曝腳踩兩條船,舊照曝光,與原配從未離婚育有一子

炸裂!杜建英被曝腳踩兩條船,舊照曝光,與原配從未離婚育有一子

吭哧有力
2025-07-19 16:23:44
2025-07-20 05:19:00
腦極體 incentive-icons
腦極體
從智能密鑰到已知盡頭
3391文章數(shù) 166952關注度
往期回顧 全部

科技要聞

工信部等約談17家車企巨頭,競爭劃新紅線

頭條要聞

緬甸園區(qū)老板送回19歲高考生:你前途光明 不該留在這

頭條要聞

緬甸園區(qū)老板送回19歲高考生:你前途光明 不該留在這

體育要聞

女籃無緣亞洲杯決賽 韓旭淚灑發(fā)布會

娛樂要聞

肖戰(zhàn)微博改名:去掉X玖少年團頭銜

財經(jīng)要聞

娃哈哈爭產(chǎn)大戰(zhàn):杜建英的進擊

汽車要聞

中汽中心新能源檢驗中心煥新發(fā)布"汽車行車控制安全技術驗證VCTA"

態(tài)度原創(chuàng)

時尚
家居
房產(chǎn)
教育
軍事航空

隨手拍也能美上熱搜,這個穿搭真的自帶美女氛圍

家居要聞

簡構智居 現(xiàn)代功能美學

房產(chǎn)要聞

漏水、開裂…為阻止降價,海口這個盤業(yè)主集體爆黑料,還講鬼故事!

教育要聞

選科不是選專業(yè),是選命運的牌面

軍事要聞

特朗普:印巴沖突期間有5架戰(zhàn)機被擊落

無障礙瀏覽 進入關懷版 主站蜘蛛池模板: 义马市| 汾阳市| 哈密市| 游戏| 郯城县| 重庆市| 门头沟区| 万年县| 工布江达县| 钟山县| 皮山县| 南丹县| 隆安县| 上虞市| 黎城县| 图木舒克市| 正定县| 格尔木市| 萨嘎县| 吴堡县| 榕江县| 顺昌县| 双城市| 宽城| 土默特右旗| 三亚市| 鹿邑县| 临城县| 板桥市| 开平市| 遂昌县| 呼图壁县| 思茅市| 舞钢市| 江川县| 社会| 静乐县| 宁河县| 大厂| 峡江县| 大理市|