99国产精品欲av蜜臀,可以直接免费观看的AV网站,gogogo高清免费完整版,啊灬啊灬啊灬免费毛片

網(wǎng)易首頁 > 網(wǎng)易號 > 正文 申請入駐

推理性能提升13倍!百度智能云發(fā)布昆侖芯超節(jié)點

0
分享至

4月25日,以“模型的世界,應(yīng)用的天下”為主題的Create 2025 百度AI開發(fā)者大會在湖北武漢召開。會上,百度集團(tuán)執(zhí)行副總裁、百度智能云事業(yè)群總裁沈抖分享了百度智能云在智能基礎(chǔ)設(shè)施建設(shè)方面的最新成果,并在算力、模型及應(yīng)用等方面發(fā)布一系列全新產(chǎn)品。

大模型的高效落地亟需從底層算力到應(yīng)用的全棧、系統(tǒng)級支撐——既需高性能硬件與集群優(yōu)化,也需靈活的開發(fā)工具鏈與場景化解決方案。基于多年在大模型研發(fā)與產(chǎn)業(yè)落地的深厚積累,百度智能云構(gòu)建了新一代系統(tǒng)級智能基礎(chǔ)設(shè)施,為企業(yè)大模型應(yīng)用落地提供最佳解決方案。

相關(guān)數(shù)據(jù)顯示,2024全年百度智能云在大模型相關(guān)中標(biāo)項目數(shù)、行業(yè)覆蓋數(shù)、央國企中標(biāo)項目數(shù)三個維度均為第一,在能源、政務(wù)、金融三個行業(yè)的中標(biāo)項目數(shù)位于所有廠商第一。截止目前,千帆平臺企業(yè)用戶數(shù)量超40萬,千帆平臺組件數(shù)量超1000個,企業(yè)在千帆平臺上已開發(fā)出了超100萬個應(yīng)用。

沈抖表示,系統(tǒng)的價值,不僅是解決某一個問題,而是讓企業(yè)擁有創(chuàng)造“創(chuàng)造的能力”。企業(yè)可以結(jié)合自己的數(shù)據(jù)、流程、邏輯,利用百度智能云的系統(tǒng)級能力打造企業(yè)專屬AI基礎(chǔ)設(shè)施。



百舸+昆侖芯超節(jié)點:推理性能提升13倍、成本降低95%

算力是AI時代的“新電力”。百度智能云通過自研昆侖芯P800芯片及百舸大規(guī)模推理加速能力,實現(xiàn)算力性能與成本的雙重突破。

本次大會,百度正式點亮了昆侖芯P800的三萬卡集群。在金融行業(yè),招商銀行與百度智能云基于昆侖芯P800展開算力合作,能穩(wěn)定支持各類開源大模型,性能表現(xiàn)卓越,在智能客服、多模態(tài)數(shù)據(jù)分析等場景實現(xiàn)了顯著效能提升。目前,除了招商銀行這類金融機(jī)構(gòu),昆侖芯P800算力已在國家電網(wǎng)、中國鋼研等央企,同濟(jì)大學(xué)、北京大學(xué)等高校及一批互聯(lián)網(wǎng)企業(yè)進(jìn)行規(guī)模化部署。

為了進(jìn)一步降低算力使用成本,百度智能云正式發(fā)布昆侖芯超節(jié)點。

昆侖芯超節(jié)點支持把64張昆侖芯AI加速卡放到同一個機(jī)柜,實現(xiàn)單節(jié)點的超強(qiáng)性能,一個機(jī)柜就能頂過去100臺機(jī)器。與以往的方案相比,昆侖芯超節(jié)點用更快的機(jī)內(nèi)通信替代機(jī)間通信,可以有效降低帶寬成本,最終實現(xiàn)卡間互聯(lián)帶寬提升8倍,單機(jī)訓(xùn)練性能提升10倍,單卡推理性能提升13倍。



僅僅擁有高性能芯片和大規(guī)模集群是遠(yuǎn)遠(yuǎn)不夠的,如何穩(wěn)定、高效地釋放算力的真正價值才是關(guān)鍵所在。沈抖認(rèn)為,未來三年,推理降本,一定是企業(yè)最重要的工作。

百度智能云全面升級百舸推理加速能力。通過大規(guī)模分布式推理的PD分離,百舸支持客戶根據(jù)不同場景的業(yè)務(wù)特點,自適應(yīng)地設(shè)置PD配比,并做到token級別的PD負(fù)載均衡。針對MOE模型,百舸做到了大規(guī)模多機(jī)專家并行的極致優(yōu)化,可以大幅降低MOE模型推理的通信開銷。最后,百舸對核心鏈路上的每一個細(xì)節(jié)做了系統(tǒng)級的工程優(yōu)化,大幅提升GPU的有效利用率。

從百度內(nèi)部實踐來看,百舸推理加速的能力正在作為千帆的算力底座,為40萬客戶提供服務(wù)。上線以來,千帆的推理吞吐提升20倍,推理速度提升50%以上。在外部,百舸不止支持著像招商銀行、中國石化、長安汽車等企業(yè)的超大規(guī)模算力需求,也很好地支撐著創(chuàng)企客戶、伙伴的模型訓(xùn)練、推理需求。



以北京人形機(jī)器人創(chuàng)新中心為例,百度百舸為創(chuàng)新中心構(gòu)建了穩(wěn)定的超大算力集群,確保具身模型的訓(xùn)練和推理得以高效進(jìn)行,支持了人形機(jī)器人的快速迭代。在近日全球首個人形機(jī)器人半程馬拉松中,北京人形機(jī)器人創(chuàng)新中心旗下純電驅(qū)全尺寸人形機(jī)器人“天工”,以2小時40分42秒的成績率先沖線一舉奪冠。




為企業(yè)應(yīng)用開發(fā)提效!千帆發(fā)布智能體Pro及MCP服務(wù)

企業(yè)部署大模型,不僅需要高性價比的模型服務(wù),更需要全面的模型工具。在模型服務(wù)層面,目前千帆平臺上有超過100多個模型,不僅包括文心4.5Turbo、文心X1 Turbo等百度自研模型,還包括DeepSeek、Ilama、Vidu等第三方模型,服務(wù)穩(wěn)定、可靠。在模型開發(fā)層面,千帆平臺可以提供全面的模型開發(fā)工具鏈,支持深度思考模型、多模態(tài)模型的定制、精調(diào)。

以模型蒸餾為例,智聯(lián)招聘在人崗匹配場景使用了千帆平臺的模型蒸餾工具鏈,用千億參數(shù)的DeepSeek R1作為“教師模型”,用百億參數(shù)的ERNIE Speed作為“學(xué)生模型”,經(jīng)過調(diào)優(yōu)后的小參數(shù)模型,不僅可以媲美“教師模型”的效果,成本也降低至3成。



在應(yīng)用開發(fā)上,本次大會千帆平臺全面升級了企業(yè)級Agent開發(fā)工具鏈,發(fā)布了全新推理式智能體——智能體Pro,從快問快答升級到深思熟慮,并且支持每個企業(yè)定制自己的專屬智能體。以污水寶為例,基于千帆Agentic RAG能力,讓Agent結(jié)合企業(yè)自己的私域數(shù)據(jù)和企業(yè)知識庫,可以基于對任務(wù)的理解去制定檢索策略,大幅降低模型幻覺。同時,智能體Pro也支持Deep Research深度研究模式,能讓Agent自主完成復(fù)雜任務(wù)的步驟規(guī)劃、信息篩選和整理,支持像人一樣操控電腦瀏覽網(wǎng)頁(computer use)進(jìn)行探索式知識收集,也支持像人一樣使用多種工具繪制圖標(biāo)、撰寫,生成結(jié)構(gòu)清晰、內(nèi)容豐富的專業(yè)報告。

基于DeepResearch能力,榮耀正在利用千帆平臺,面向高校學(xué)生、職場白領(lǐng)等群體,打造一款科研場景深度研究的應(yīng)用,將很快會在榮耀筆記本上上線。



MCP的出現(xiàn),幫助開發(fā)者和企業(yè)在開發(fā)Agent時,能夠更好地利用行業(yè)數(shù)據(jù)和工具。本次大會,百度智能云正式發(fā)布國內(nèi)首個企業(yè)級MCP服務(wù),第一批已經(jīng)有超過1000個MCP Servers供企業(yè)及開發(fā)者靈活選擇。另外,開發(fā)者也可以在千帆上開發(fā)自己的MCP Server,并發(fā)布到MCP廣場,支持免費托管,而且百度搜索也會索引這些MCP Server,讓它們被更多的開發(fā)者引用。



從模型服務(wù)到應(yīng)用開發(fā),企業(yè)客戶已經(jīng)在千帆平臺上做出了很多行業(yè)創(chuàng)新。民生銀行與百度智能云合作,探索大模型在商業(yè)銀行的落地,完成了金融領(lǐng)域第一個端到端涵蓋算力、平臺、模型、應(yīng)用四層架構(gòu)的項目落地。



自研AI應(yīng)用重磅升級:實現(xiàn)營銷全旅程服務(wù),視覺AI應(yīng)用成本大幅下降

百度智能云打造的智能基礎(chǔ)設(shè)施也支撐著百度自己的應(yīng)用創(chuàng)新。本次大會,百度智能云面向智能營銷、視覺AI兩大領(lǐng)域,升級了兩大自研AI應(yīng)用產(chǎn)品。

金融營銷場景需要高精準(zhǔn)獲客、“高情商”客服及高效的流失預(yù)警,百度智能云本次升級發(fā)布客悅·ONE,在上述核心場景進(jìn)行了全面優(yōu)化,為客戶提供全生命周期智能營銷服務(wù),助力企業(yè)實現(xiàn)營銷效能全面提升。

以理財撤單場景為例,傳統(tǒng)模式下,用戶需經(jīng)歷復(fù)雜的說明閱讀和多層級菜單操作,效率低下。客悅通過AI驅(qū)動的智能交互,極大簡化了這一流程。AI不僅能識別并安撫用戶焦慮,更能在對話中直接引導(dǎo)解決問題,還能自動提煉關(guān)鍵信息并回流數(shù)據(jù),持續(xù)優(yōu)化服務(wù)體驗。

目前客悅已經(jīng)服務(wù)銀行、證券、保險等不同細(xì)分領(lǐng)域的金融企業(yè)50余家,落地金融行業(yè)10余個場景。



為了解決視覺AI模型訓(xùn)練周期長、門檻高,需要大量人工干預(yù)的問題。百度智能云升級發(fā)布一見5.0,在標(biāo)準(zhǔn)化高、規(guī)則清晰的任務(wù)中,僅需一句自然語言,即可秒級生成專業(yè)級視覺AI應(yīng)用,一線業(yè)務(wù)人員也能輕松上手,借助云邊協(xié)同,應(yīng)用成本大幅降低,加速了視覺智能規(guī)模化的落地。



目前,百度智能云從算力、平臺到應(yīng)用的系統(tǒng)級能力,已經(jīng)在多個企業(yè)場景中穩(wěn)定運行。中國鋼研與百度智能云聯(lián)合打造全棧智能基礎(chǔ)設(shè)施,基于昆侖芯和百舸,搭建了專屬的智算平臺;在千帆上做模型精調(diào),使用大、小模型結(jié)合的方式獲得最佳效果;結(jié)合一見視覺平臺,快速完成了表面缺陷檢測、金相分析等核心場景的應(yīng)用開發(fā)。

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點推薦
什么天才本科生,不過是“我的院長父親”罷了

什么天才本科生,不過是“我的院長父親”罷了

亮見
2025-05-09 13:47:41
勇士G2輸球后,美媒更新奪冠概率!掘金4.3%墊底榜首仍高達(dá)49.4%

勇士G2輸球后,美媒更新奪冠概率!掘金4.3%墊底榜首仍高達(dá)49.4%

鍋子籃球
2025-05-09 13:38:34
林志玲下嫁日本六年已被日化?體態(tài)畏畏縮縮,家暴傳聞疑似被坐實

林志玲下嫁日本六年已被日化?體態(tài)畏畏縮縮,家暴傳聞疑似被坐實

烏娛子醬
2025-05-08 20:15:47
央視點名痛批!花光84億造不出一輛車,卻能花5000萬給員工買零食

央視點名痛批!花光84億造不出一輛車,卻能花5000萬給員工買零食

說說史事
2025-05-08 17:42:56
印度怒了,大批運輸機(jī)飛赴巴基斯坦卸下大批裝備,強(qiáng)援來了

印度怒了,大批運輸機(jī)飛赴巴基斯坦卸下大批裝備,強(qiáng)援來了

局勢帝
2025-05-09 11:42:21
趙作海去世

趙作海去世

新京報政事兒
2025-05-09 11:58:52
中美坐上談判桌前,美副總統(tǒng)先說了一句:臺灣問題不會進(jìn)行交易

中美坐上談判桌前,美副總統(tǒng)先說了一句:臺灣問題不會進(jìn)行交易

深析古今
2025-05-09 10:56:44
國產(chǎn)發(fā)動機(jī)熱效率直逼50%,“畝產(chǎn)三萬斤”的風(fēng)氣得壓一壓了!

國產(chǎn)發(fā)動機(jī)熱效率直逼50%,“畝產(chǎn)三萬斤”的風(fēng)氣得壓一壓了!

少數(shù)派報告Report
2025-05-09 11:21:42
這個洞不僅黑而且大

這個洞不僅黑而且大

后視鏡里de未來
2025-05-08 11:33:38
突發(fā)!巴基斯坦F16戰(zhàn)機(jī)被擊落,關(guān)鍵時刻印度還迎來兩大外援

突發(fā)!巴基斯坦F16戰(zhàn)機(jī)被擊落,關(guān)鍵時刻印度還迎來兩大外援

說天說地說實事
2025-05-09 09:13:32
偽造學(xué)歷入讀港大,28歲環(huán)球小姐李思萱被判入獄240天

偽造學(xué)歷入讀港大,28歲環(huán)球小姐李思萱被判入獄240天

大象新聞
2025-05-09 12:31:14
被資本做局了?Jennie穿情趣衣曬大尺度照,Lisa穿內(nèi)褲走秀引熱議

被資本做局了?Jennie穿情趣衣曬大尺度照,Lisa穿內(nèi)褲走秀引熱議

吃瓜少女張小暖
2025-05-08 20:29:41
騰訊砸3億的國產(chǎn)沖鋒衣,火成“體制戰(zhàn)袍”

騰訊砸3億的國產(chǎn)沖鋒衣,火成“體制戰(zhàn)袍”

金錯刀
2025-05-09 14:05:08
武契奇繞道多國抵達(dá)莫斯科,普京問候其“艱難旅程”:你到這里還好嗎

武契奇繞道多國抵達(dá)莫斯科,普京問候其“艱難旅程”:你到這里還好嗎

環(huán)球網(wǎng)資訊
2025-05-09 13:17:33
網(wǎng)傳小米車主集體維權(quán),發(fā)表聯(lián)合聲明:我們要求退車!

網(wǎng)傳小米車主集體維權(quán),發(fā)表聯(lián)合聲明:我們要求退車!

可達(dá)鴨面面觀
2025-05-09 15:57:43
俄羅斯勝利日閱兵,首次出場的“天竺葵”無人機(jī)發(fā)射系統(tǒng)引人矚目

俄羅斯勝利日閱兵,首次出場的“天竺葵”無人機(jī)發(fā)射系統(tǒng)引人矚目

籌海者張曉東
2025-05-09 08:44:41
中俄連談3小時,俄方想要的,中方給的很干脆,普京對華作出保證

中俄連談3小時,俄方想要的,中方給的很干脆,普京對華作出保證

說天說地說實事
2025-05-09 15:15:22
全面爆發(fā):印度攻擊巴基斯坦的防空系統(tǒng)

全面爆發(fā):印度攻擊巴基斯坦的防空系統(tǒng)

一種觀點
2025-05-08 18:49:59
英國名將率6人舉報:趙心童應(yīng)終身禁賽!陰陽丁俊暉,3次針對小趙

英國名將率6人舉報:趙心童應(yīng)終身禁賽!陰陽丁俊暉,3次針對小趙

阿傖說事
2025-05-09 11:31:38
比爾·蓋茨捐出幾乎全部財產(chǎn)!馬斯克炮轟?

比爾·蓋茨捐出幾乎全部財產(chǎn)!馬斯克炮轟?

看看新聞Knews
2025-05-09 12:35:37
2025-05-09 16:36:49
新眸深度 incentive-icons
新眸深度
看見商業(yè)另一面。
1233文章數(shù) 2427關(guān)注度
往期回顧 全部

科技要聞

奧特曼:不怕中國趕上 就怕美國犯愚蠢錯誤

頭條要聞

普雷沃斯特當(dāng)選新一任教皇 外交部回應(yīng)

頭條要聞

普雷沃斯特當(dāng)選新一任教皇 外交部回應(yīng)

體育要聞

對話薩維奧拉:希望中國能有更多武磊出現(xiàn)

娛樂要聞

災(zāi)難性公關(guān) 毀掉曾黎二十年人緣積累

財經(jīng)要聞

降息潮延續(xù) 存款利率全面邁向“1時代”

汽車要聞

訂單破萬/32.98萬起 全新高山家族于5月13日上市

態(tài)度原創(chuàng)

藝術(shù)
手機(jī)
本地
教育
時尚

藝術(shù)要聞

故宮珍藏的墨跡《十七帖》,比拓本更精良,這才是地道的魏晉寫法

手機(jī)要聞

等等黨狂喜!紅魔電競新品要來了,又一驍龍8至尊小平板!

本地新聞

非遺里的河南|汴梁鳶舞千年韻!宋室風(fēng)箏藏多少絕活

教育要聞

他們的建議最接地氣,點贊收藏給孩子看

20~60歲穿都美!這件無齡感上衣太絕了

無障礙瀏覽 進(jìn)入關(guān)懷版 主站蜘蛛池模板: 新乡市| 启东市| 东莞市| 漾濞| 博罗县| 呈贡县| 陈巴尔虎旗| 徐水县| 德惠市| 芜湖市| 平原县| 江津市| 彭州市| 大邑县| 武平县| 德州市| 金乡县| 雷州市| 丰顺县| 望江县| 临安市| 南汇区| 锦州市| 页游| 墨玉县| 楚雄市| 集贤县| 大港区| 洛隆县| 神农架林区| 望城县| 积石山| 嘉黎县| 鹤峰县| 常州市| 西安市| 彰武县| 巴青县| 霍林郭勒市| 花莲市| 广宁县|