大模型應(yīng)用7項(xiàng)第一！10月24日，第七屆世界聲博會暨2024科大訊飛全球1024開發(fā)者節(jié)開幕上，科大訊飛董事長劉慶峰公布訊飛星火大模型應(yīng)用成績單，并發(fā)布星火4.0 Turbo：七大核心能力全面超過GPT-4 Turbo，數(shù)學(xué)和代碼能力超越GPT-4o，國內(nèi)外中英文14項(xiàng)主流測試集中訊飛星火4.0 Turbo實(shí)現(xiàn)9項(xiàng)第一。與此同時，國產(chǎn)超大規(guī)模智算平臺“飛星二號”正式啟動。

會上，科大訊飛首發(fā)10項(xiàng)基于訊飛星火底座能力的硬核產(chǎn)品與創(chuàng)新應(yīng)用：定義多模AIUI標(biāo)準(zhǔn)，發(fā)布超擬人數(shù)字人；發(fā)布星火多語言大模型、訊飛星火醫(yī)學(xué)影像大模型、汽車端側(cè)星火大模型；發(fā)布首個基于“問題鏈”的高中數(shù)學(xué)智能教師系統(tǒng)、星火智慧黑板2.0、AI作業(yè)過濾器等；發(fā)布星火智辦一體機(jī)、智能座艙人機(jī)交互效果評測機(jī)器人VIAS以及科大訊飛多語種 AI 翻譯透明屏。

訊飛星火4.0 Turbo：國際14項(xiàng)主流測試集9項(xiàng)超越，提效50%

訊飛星火大模型4.0 Turbo正式發(fā)布，在數(shù)學(xué)能力、代碼能力上超過了GPT-4o。由艾倫人工智能研究所、OpenAI等國內(nèi)外權(quán)威單位發(fā)布，涵蓋理解和推理、綜合考試、數(shù)學(xué)和科學(xué)、代碼等不同任務(wù)類型的14項(xiàng)主流測試集中，訊飛星火4.0-Turbo在其中9項(xiàng)測試集中實(shí)現(xiàn)超越，星火4.0 Turbo效率相對提升50%。

劉慶峰特別提到“硬碰硬”的數(shù)學(xué)能力和代碼能力。

根據(jù)行業(yè)實(shí)用數(shù)學(xué)任務(wù)構(gòu)建的測試集CAppliedMath-1.0，訊飛星火4.0 Turbo在計(jì)算、財(cái)務(wù)、金融、度量等多個維度的任務(wù)中均超過GPT-4o水平，已完成超長思維鏈、樹搜索和自我反思評價等算法驗(yàn)證，預(yù)計(jì)今年底可實(shí)現(xiàn)類“o1”的高難度數(shù)學(xué)能力顯著提升。

根據(jù)代碼生成HumanEval測試集上的效果對比，訊飛星火4.0 Turbo在Python、Java、JavaScript等任務(wù)上和GPT-4o的差距微弱，在C++能力上超過GPT-4o。在真實(shí)應(yīng)用場景，基于認(rèn)知智能全國重點(diǎn)實(shí)驗(yàn)室構(gòu)建的iFLYCode-Eval-2.0代碼實(shí)用場景測試集，訊飛星火4.0 Turbo在代碼生成、代碼檢錯、單元測試等任務(wù)上都超過了GPT-4o。同時推出星火代碼7B版本，滿足代碼生成、代碼補(bǔ)全等極速響應(yīng)型任務(wù)，效果業(yè)界最優(yōu)。

首發(fā)語音視覺虛擬人交互“三合一”

發(fā)布會上，科大訊飛重新定義萬物智聯(lián)時代的多模AIUI交互標(biāo)準(zhǔn)，在原有的遠(yuǎn)場高噪、全雙工、多語種多方言能力上，升級了多模態(tài)能力，新增了超擬人和個性化能力。

超擬人數(shù)字人首次亮相，多模態(tài)的交互從超擬人的語音變成超擬人的數(shù)字人，實(shí)現(xiàn)語音、視頻、圖文的全部聯(lián)動的多模態(tài)交互。科大訊飛研究院院長劉聰現(xiàn)場和超擬人數(shù)字人玩了個“角色扮演”游戲，無論是扮演孫悟空還是小豬佩奇，數(shù)字人反應(yīng)都惟妙惟肖。

多模態(tài)視覺能力加持下的人機(jī)交互有多驚喜？劉聰現(xiàn)場給超擬人數(shù)字人打了個“視頻電話”，他不斷調(diào)整道具“孫悟空”“奧特曼”“怪獸”的擺放位置，無需拍照，超擬人數(shù)字人看圖說話，馬上回應(yīng)：“奧特曼和孫悟空停止了打斗，正在聯(lián)合對抗怪獸 ”，和劉聰暢聊不同角度的所見。

劉聰還演示了更實(shí)用的旅游購物場景，當(dāng)攝像頭轉(zhuǎn)向印有外文的化妝品及酒類產(chǎn)品時，超擬人數(shù)字人能對畫面中產(chǎn)品的品牌、功能等信息進(jìn)行“秒回”，超擬人數(shù)字人已成為“跨語言”購物的好幫手。

“目前，訊飛星火支持用戶創(chuàng)建自己的個性化數(shù)字人，打造每個人的數(shù)字分身。”劉聰現(xiàn)場演示了一個自己的“數(shù)字分身”，只需在后臺進(jìn)行簡單的編輯、定義，就可快速生成自己的卡通形象，更能一句話復(fù)刻自己的聲音作為發(fā)音人，隨時隨地與自己對話。目前，已支持1300+種人設(shè)打造。

硬件產(chǎn)品端，內(nèi)嵌了星火多模AIUI能力的訊飛AI學(xué)習(xí)機(jī)閱讀伙伴即將上線，孩子們“指哪讀哪”，書中的故事可以馬上“擬人化”啟發(fā)孩子思考和提問。

發(fā)布會現(xiàn)場，超擬人數(shù)字人能力正式開通內(nèi)測，向現(xiàn)場來賓開通體驗(yàn)權(quán)限。

首發(fā)星火多語言大模型，為世界提供第二種選擇

在語音識別領(lǐng)域，科大訊飛的遠(yuǎn)場高噪場景語音識別領(lǐng)先優(yōu)勢進(jìn)一步擴(kuò)大。

在多語言能力上，首次實(shí)現(xiàn)全國地級市方言全覆蓋，含全國288個地市、202種方言，訊飛輸入法14.0即將支持202種方言免切換自由說。

在多語種能力上，首次發(fā)布星火多語言大模型，除中英文外，可支持俄、日、阿、法等8個語種。根據(jù)實(shí)用任務(wù)場景構(gòu)建測試集MMT-Eval-1.0，訊飛星火在汽車、家電、辦公、翻譯等行業(yè)的任務(wù)場景應(yīng)用效果超過了GPT-4o。

“訊飛作為中國唯一的認(rèn)知智能全國重點(diǎn)實(shí)驗(yàn)室承建單位，我們有使命有責(zé)任要做多語言大模型”，劉慶峰表示，訊飛星火底座能力要不斷提升，對標(biāo)全球最好水平，同時還要針對真實(shí)應(yīng)用場景做到全球最好，不斷擴(kuò)大多語種范圍，“我們一定要代表中國給世界第二種選擇。”

多模態(tài)多語言能力升級，將全面賦能汽車產(chǎn)業(yè)。科大訊飛還首發(fā)了汽車端側(cè)星火大模型，據(jù)悉，今年第四季度起，奇瑞、廣汽、長城等多款搭載端側(cè)大模型的車型將上市開售。

大模型賦能民生剛需：發(fā)布教育、醫(yī)療、司法、政務(wù)等領(lǐng)域AI助手

“用人工智能技術(shù)解決社會剛需”，是科大訊飛一直以來的出發(fā)點(diǎn)之一。此次1024科大訊飛全球開發(fā)者節(jié)上，科大訊飛面向教育、醫(yī)療、司法、政務(wù)服務(wù)、企業(yè)辦公等多個行業(yè)場景發(fā)布了最新的產(chǎn)品應(yīng)用。

在教育行業(yè)，首次發(fā)布基于“問題鏈”的高中數(shù)學(xué)智能教師系統(tǒng)。

今年1月份，中國教育科學(xué)研究院與科大訊飛、華為開展深度合作，在訊飛星火教育大模型的基礎(chǔ)上開展“基于生成式人工智能的中小學(xué)智能教師示范研究”。此次發(fā)布的高中數(shù)學(xué)智能教師系統(tǒng)，是眾多高中數(shù)學(xué)學(xué)科優(yōu)秀教師集體智慧和AI大模型的機(jī)器智能雙向賦能，實(shí)現(xiàn)“人機(jī)共育”。它可以智能生成教學(xué)問題鏈，以循序漸進(jìn)的方式輔助教師啟發(fā)學(xué)生思考并逐步解決問題，同時基于精準(zhǔn)學(xué)情定位學(xué)生薄弱點(diǎn)、融合最近發(fā)展區(qū)規(guī)劃路徑、鼓勵學(xué)生基于真實(shí)世界的主動提問、探究式學(xué)習(xí)，幫助學(xué)生實(shí)現(xiàn)知識、到能力、再到素養(yǎng)的綜合培養(yǎng)。該高中數(shù)學(xué)智能教師系統(tǒng)是中國教科院牽頭、北京、上海、重慶、深圳、合肥、成都、大連、廣州、哈爾濱等12個區(qū)域50多位數(shù)學(xué)教研員、400多位優(yōu)秀教師與訊飛星火大模型人機(jī)共創(chuàng)的智慧成果。

搭載了高中數(shù)學(xué)智能教師系統(tǒng)的星火智慧黑板2.0也將于10月25日在第84屆教育裝備展上正式發(fā)布，從AI均衡視聽更公平、AI教學(xué)工具更高效、AI教師助手更智慧、全國產(chǎn)化算力更安全等四個方面推動黑板從板書工具躍遷為教學(xué)AI助手。

此外，訊飛AI學(xué)習(xí)機(jī)中首發(fā)AI作業(yè)過濾器。學(xué)習(xí)機(jī)通過OCR能力識別出紙質(zhì)練習(xí)題，根據(jù)學(xué)生歷史學(xué)習(xí)情況和本地化考情，將題目分出“必做題”“選做題”“建議不做題”三個等級，實(shí)現(xiàn)“練得更少、學(xué)得更好”的目標(biāo)。

【現(xiàn)場演示圖片】

在醫(yī)療行業(yè)，發(fā)布訊飛星火醫(yī)療大模型2.0，醫(yī)療海量知識問答、醫(yī)療復(fù)雜語言理解、醫(yī)療專業(yè)文書生成、醫(yī)療診斷治療推薦、醫(yī)療多輪交互、醫(yī)療多模態(tài)交互等六大醫(yī)療核心場景能力重大升級并持續(xù)領(lǐng)先。

基于訊飛星火醫(yī)學(xué)影像大模型打造的智能醫(yī)學(xué)影像助手也正式發(fā)布，在智能質(zhì)控環(huán)節(jié)，可幫助影像技師快速評估圖像質(zhì)量，及時糾正檢查問題；在智能診斷環(huán)節(jié)，可幫助影像醫(yī)師快速生成診斷報告，解釋溯源并多期對比；在智能讀片環(huán)節(jié)，可接入醫(yī)學(xué)影像大模型，通過相關(guān)問答，幫助臨床醫(yī)師制定診療方案。

會上，訊飛醫(yī)療還聯(lián)合安徽省衛(wèi)生健康委員會、認(rèn)知智能全國重點(diǎn)實(shí)驗(yàn)室，共同發(fā)布全譜系全模態(tài)醫(yī)學(xué)影像大模型開放合作計(jì)劃，旨在匯聚全球最頂尖的影像AI科研團(tuán)隊(duì)，共同推進(jìn)醫(yī)學(xué)影像大模型的發(fā)展。

在司法場景，法律大模型賦能庭審筆錄制作、裁判文書編寫、法條類案檢索等司法場景，和星火通用大模型相比，效率提升從61.7%提升到87.9%。

在政務(wù)服務(wù)場景，政務(wù)大模型持續(xù)迭代，全面覆蓋4500多種標(biāo)準(zhǔn)化事項(xiàng)和60多種材料，老百姓和政務(wù)大模型“聊天”就能實(shí)現(xiàn)邊聊邊確認(rèn)辦事意圖，審核時間縮短80%，登記效率提升5倍。此外，發(fā)布會上首發(fā)了搭載政務(wù)大模型的“星火智辦一體機(jī)”，方便群眾從“問著辦”到“領(lǐng)著辦”。

AI賦能企業(yè)：訊飛星火正成為央國企的第一選擇

“訊飛星火已成為央國企大模型的第一選擇。”劉慶峰曬出了大模型應(yīng)用成績單：央國企中標(biāo)第一、教育醫(yī)療市場第一、智能汽車市場第一、大模型開發(fā)者生態(tài)第一、智能硬件市場第一、賦能科研應(yīng)用第一、賦能工業(yè)應(yīng)用第一。

截至2024年10月，科大訊飛已與各頭部企業(yè)共建20多個行業(yè)大模型，覆蓋300+應(yīng)用場景，所覆蓋行業(yè)和場景數(shù)都是第一。

為了幫助各行各業(yè)更好地落地大模型，科大訊飛構(gòu)建了從“建算力、理數(shù)據(jù)、訓(xùn)模型，到落場景、保安全、精運(yùn)營”的全套解決方案。“科大訊飛有領(lǐng)先的工具鏈，可大幅提升‘理數(shù)據(jù)、訓(xùn)模型’的效率；有覆蓋300+行業(yè)場景的實(shí)際應(yīng)用案例，已形成相互借鑒和復(fù)用的規(guī)模化效應(yīng)；還有全國產(chǎn)化的算力平臺。”劉慶峰說。

值得一提的是，越來越多的企業(yè)依托訊飛智能體平臺，孵化員工自己的AI助手。比如國能集團(tuán)舉辦“國家能源杯”大賽，共126個隊(duì)伍參賽，最終創(chuàng)新孵化了54個場景智能體，打造員工自己的AI助手。會上，科大訊飛也正式邀請全國開發(fā)者們參與共創(chuàng)。

訊飛星火賦能科研行業(yè)NO.1,AI for Science成為科技發(fā)展新引擎

今年的諾貝爾物理學(xué)獎、化學(xué)獎、經(jīng)濟(jì)學(xué)獎都頒發(fā)給了 AI 領(lǐng)域的科學(xué)家。劉慶峰表示，AI for Science帶來科研范式的根本變革，正在成為科技發(fā)展的新引擎。

訊飛星火持續(xù)為高校提供基礎(chǔ)科研提效服務(wù)。劉慶峰介紹，星火科研助手自去年底發(fā)布以來，已在中科院下屬116個院所使用。北京郵電大學(xué)EZCoding雛雁/大創(chuàng)團(tuán)隊(duì)基于訊飛星火大模型打造的編程教學(xué)應(yīng)用平臺“碼上”，目前已在全國332所院校開通使用，學(xué)生主動提問率增加1倍，教師輔導(dǎo)工作減少80%。

劉慶峰提到，人工智能賦能科研工作的三個臺階：依托科研文獻(xiàn)助手和代碼助手提升基礎(chǔ)工作效率，基于深度神經(jīng)網(wǎng)絡(luò)對科學(xué)任務(wù)進(jìn)行精準(zhǔn)建模，以及借助認(rèn)知大模型學(xué)習(xí)領(lǐng)域知識并輔助設(shè)計(jì)科研實(shí)驗(yàn)方案。據(jù)悉，科大訊飛已在大模型+科研領(lǐng)域做了許多探索，如聯(lián)合中國科學(xué)技術(shù)大學(xué)劉海燕教授團(tuán)隊(duì)，成功設(shè)計(jì)了48個自然界不存在的全新蛋白質(zhì);聯(lián)合中科院動物研究所李鑫團(tuán)隊(duì)，研究單細(xì)胞基因表達(dá)課題；聯(lián)合中科院等離子體物理研究所李建剛院士團(tuán)隊(duì)，研究托卡馬克等離子體控制。此外，科大訊飛還聯(lián)合中國科技大學(xué)研發(fā)“化學(xué)大模型”，聯(lián)合中科院大連化學(xué)物理研究所研發(fā)“化工大模型”。

“AI for Science決定了中國科技發(fā)展的速度，賦能科研是訊飛星火的重要使命”，劉慶峰說。

首個國產(chǎn)萬卡算力集群“飛星二號”平臺上線，星火大模型持續(xù)引領(lǐng)全國產(chǎn)算力平臺發(fā)展

2024科大訊飛AI開發(fā)者大賽共有來自14個國家、348座城市的35268支團(tuán)隊(duì)參賽，其中9372支是大模型團(tuán)隊(duì)。2024科大訊飛AI開發(fā)者大賽中，科大訊飛聯(lián)合30所科研院校、44家企業(yè)與機(jī)構(gòu)頂尖共創(chuàng)賽題，最終評選出十佳團(tuán)隊(duì)。

只有生態(tài)的繁榮，才有人工智能的大未來。根據(jù)IDC研究報告和市場公開數(shù)據(jù)顯示，科大訊飛在語音語義市占率中第一、大模型開發(fā)者規(guī)模第一，達(dá)78.1萬。發(fā)布會上，記者獲悉，科大訊飛將開放全場景資源，從技術(shù)能力到應(yīng)用落地，用最短路徑實(shí)現(xiàn)產(chǎn)品成功，線上線下渠道和資源共享，加速開發(fā)者邁向市場成功。據(jù)悉，科大訊飛將牽頭成立AI基金，用5億創(chuàng)業(yè)基金推動開發(fā)者創(chuàng)業(yè)，加速前沿技術(shù)產(chǎn)業(yè)化進(jìn)程，并與地方政府聯(lián)合為AI創(chuàng)業(yè)團(tuán)隊(duì)提供產(chǎn)業(yè)落地支撐。

發(fā)布會上，科大訊飛、華為、合肥市大數(shù)據(jù)資產(chǎn)運(yùn)營有限公司三方聯(lián)合打造的國產(chǎn)超大規(guī)模智算平臺“飛星二號”正式啟動。去年10月24日，首個國產(chǎn)萬卡算力集群“飛星一號”平臺上線，星火大模型持續(xù)引領(lǐng)全國產(chǎn)算力平臺發(fā)展，劉慶峰介紹一年以來攻克了很多‘疑難雜癥’，解決了500多次以上的基礎(chǔ)軟硬件問題和模型適配問題。

“飛星二號”將帶來新模型新算法的持續(xù)適配和智算集群規(guī)模的再次躍遷，持續(xù)探索無人區(qū)、引領(lǐng)國產(chǎn)大模型底座的發(fā)展、給世界提供第二選擇。“只有在真正自主可控的平臺上，才有真正的中國人工智能大未來。”

科大訊飛正在引領(lǐng)大模型規(guī)模化應(yīng)用時代，面向未來，劉慶峰認(rèn)為人工智能產(chǎn)業(yè)發(fā)展的關(guān)鍵是五個關(guān)鍵詞：頂天立地、自主可控、通專結(jié)合、端云聯(lián)動、軟硬一體。劉慶峰說：“堅(jiān)持這五個關(guān)鍵點(diǎn)，我們的人工智能就有大未來，就能真正的解放生產(chǎn)力、釋放想象力，改變產(chǎn)業(yè)格局和競爭格局，帶來科研范式的變化，帶來各行各業(yè)的變化，最重要的是滿足老百姓對美好生活的期望！這就是我們未來的發(fā)展方向。”