在全球汽車產(chǎn)業(yè)向智能化、網(wǎng)聯(lián)化加速轉(zhuǎn)型的浪潮中,大模型技術(shù)的崛起為汽車領(lǐng)域帶來了前所未有的變革機(jī)遇。黑芝麻智能在高性能芯片和基礎(chǔ)軟件架構(gòu)領(lǐng)域的持續(xù)創(chuàng)新,正全力推動汽車智能化的發(fā)展,為行業(yè)注入新的活力。
大模型全面助力輔助駕駛邁向智能化
隨著人工智能技術(shù)的飛速發(fā)展,大模型在汽車領(lǐng)域的應(yīng)用日益廣泛,成為推動輔助駕駛智能化的關(guān)鍵力量。從智能底盤、智能座艙到輔助駕駛,大模型的應(yīng)用場景不斷拓展,為用戶帶來更智能、更便捷的出行體驗。
在輔助駕駛領(lǐng)域,大模型能夠?qū)崿F(xiàn)端到端的決策控制,基于世界模型進(jìn)行環(huán)境感知和路徑規(guī)劃,大幅提升輔助駕駛系統(tǒng)的決策效率和準(zhǔn)確性。例如,DriveGPT4 和 DriveMLM 等模型通過整合多模態(tài)數(shù)據(jù),實現(xiàn)了更精準(zhǔn)的環(huán)境感知和駕駛決策,推動輔助駕駛技術(shù)向更高級別發(fā)展。而在智能座艙中,基于 LLM/MLM 的多模態(tài)交互技術(shù),如語音交互、艙內(nèi)行為監(jiān)控等,能夠?qū)崿F(xiàn)更自然、更智能的人車交互,提升用戶的駕駛體驗。
然而,大模型上車也對端側(cè)設(shè)備提出了更高的要求。傳統(tǒng)的模塊化方案在面對多模型、多任務(wù)時,往往存在模塊間信息丟失、計算負(fù)擔(dān)重、難以應(yīng)對長尾場景等問題。例如,模塊優(yōu)化目標(biāo)的不統(tǒng)一使得系統(tǒng)整體性能難以達(dá)到最優(yōu),而每個模塊的最壞情況執(zhí)行時間(WCET)難以精確控制,導(dǎo)致整體時延較大,這對駕駛安全來說是個不小的挑戰(zhàn)。
多模態(tài)大模型與世界模型:輔助駕駛的未來方向
多模態(tài)大模型和世界模型的出現(xiàn),為輔助駕駛技術(shù)的發(fā)展提供了新的思路和方法。多模態(tài)大模型通過融合視覺、語言等多種模態(tài)信息,能夠更全面地理解駕駛環(huán)境,提升輔助駕駛系統(tǒng)的感知能力和決策能力。例如,BLIP-2、LLaVA 等多模態(tài)模型在視覺問答、圖像描述等任務(wù)中表現(xiàn)出色,為輔助駕駛中的場景理解和決策提供了有力支持。
世界模型則通過構(gòu)建虛擬環(huán)境模型,使輔助駕駛系統(tǒng)能夠在虛擬環(huán)境中進(jìn)行模擬和學(xué)習(xí),提升系統(tǒng)的適應(yīng)性和安全性。從 2018 年的 World models 到 2024 年的 WorldDreamer 等,世界模型在輔助駕駛中的應(yīng)用不斷深化,為輔助駕駛技術(shù)的發(fā)展提供了新的動力。
黑芝麻智能:以技術(shù)創(chuàng)新引領(lǐng)汽車智能化
面對汽車智能化的挑戰(zhàn)和機(jī)遇,黑芝麻智能積極投身于技術(shù)創(chuàng)新,致力于為行業(yè)提供高性能、靈活可靠的解決方案。
黑芝麻智能積極擁抱下一代電子電氣架構(gòu)的演進(jìn),推動架構(gòu)從傳統(tǒng)模塊化向集成化、集中化、跨域融合升級,通過域控制器(DCU)、跨域多域控制器(MDC)、車載電腦(CCU + Zone)等的運(yùn)用,為汽車智能化提供高效、靈活的硬件基礎(chǔ)。武當(dāng)系列芯片平臺借助先進(jìn)的封裝技術(shù)和高速通信接口,實現(xiàn)了算力的靈活擴(kuò)展和高效通信,能夠滿足不同場景下的多樣化需求。
在芯片創(chuàng)新方面,黑芝麻智能武當(dāng)系列和華山系列芯片,為輔助駕駛智能化提供強(qiáng)大算力支持。武當(dāng)系列芯片憑借高性能、高安全性以及開源開放的特點,在行業(yè)內(nèi)脫穎而出。以武當(dāng)C1296 芯片為例,作為行業(yè)首顆支持多域融合的芯片平臺,它集成了整車數(shù)據(jù)計算、自動泊車系統(tǒng)、安全信息系統(tǒng)等多種功能,為汽車智能化提供了全方位的支撐。而華山系列芯片依靠九韶架構(gòu)、BaRT 等先進(jìn)技術(shù),為輔助駕駛提供了高效的計算能力。
同時,黑芝麻智能充分認(rèn)識到基礎(chǔ)軟件架構(gòu)的重要性,積極研發(fā)面向未來的智能化基礎(chǔ)軟件架構(gòu)。其開源基礎(chǔ)軟件參考實現(xiàn)符合《車載智能計算基礎(chǔ)平臺參考架構(gòu) 2.0》規(guī)范,為用戶提供了標(biāo)準(zhǔn)化且可靠的技術(shù)底座。通過引入 Cloud Native、OTA、Model Based Design、SOA 等通信技術(shù),基礎(chǔ)軟件架構(gòu)更好地支持大模型運(yùn)行和應(yīng)用,為輔助駕駛發(fā)展奠定堅實基礎(chǔ)。
開源生態(tài)與合作:共筑汽車智能化未來
黑芝麻智能深知開源生態(tài)對于汽車智能化發(fā)展的重要性,因此積極回饋開源社區(qū),并與眾多合作伙伴攜手構(gòu)建開放、協(xié)作的產(chǎn)業(yè)生態(tài)。
通過代碼開源和接口開放,黑芝麻智能吸引了全球范圍內(nèi)的開發(fā)者參與,促進(jìn)了技術(shù)的快速傳播和應(yīng)用。目前,武當(dāng)系列芯片的開源代碼和開放接口,為開發(fā)者提供了靈活的開發(fā)環(huán)境,加速了智能網(wǎng)聯(lián)汽車的上市進(jìn)程。
此外,黑芝麻智能還與產(chǎn)業(yè)鏈上下游的眾多企業(yè)深度合作,共同探索新技術(shù)、新模式,推動汽車智能化的持續(xù)發(fā)展。通過這種緊密的合作,黑芝麻智能構(gòu)建了一個涵蓋芯片、操作系統(tǒng)、中間件、應(yīng)用軟件等全產(chǎn)業(yè)鏈的生態(tài)系統(tǒng),為汽車智能化的全面發(fā)展提供了有力的支持。
黑芝麻智能將繼續(xù)秉持創(chuàng)新無界、合作開放的理念,不斷加大在技術(shù)研發(fā)和開源生態(tài)建設(shè)方面的投入。隨著下一代高性能芯片和基礎(chǔ)軟件架構(gòu)的持續(xù)創(chuàng)新,黑芝麻智能將為輔助駕駛的發(fā)展提供更強(qiáng)大的技術(shù)驅(qū)動力。
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.