99国产精品欲av蜜臀,可以直接免费观看的AV网站,gogogo高清免费完整版,啊灬啊灬啊灬免费毛片

網(wǎng)易首頁(yè) > 網(wǎng)易號(hào) > 正文 申請(qǐng)入駐

看好了,這才是7家大模型做高考數(shù)學(xué)題的真實(shí)分?jǐn)?shù)。

0
分享至

這兩天,很多媒體都在寫用AI考高考題的內(nèi)容。

我本來(lái)真的沒打算卷這個(gè)選題,因?yàn)橹来蠹铱隙ǘ紩?huì)寫,都會(huì)卷,我也想休息休息,真的就不打算寫了。

但是吧,用AI測(cè)語(yǔ)文考試還沒啥,但是看了一些用AI做數(shù)學(xué)考試的文章,真的給我看的一臉地鐵老頭表情包,就,那個(gè)測(cè)試方法,也特么太扯淡了。

我覺得既然是考試,那就公平公正的去測(cè)試?

當(dāng)然,你要是玩整活,那就另談了。

結(jié)果最后得出一些不太靠譜的結(jié)論,我覺得還是蠻誤導(dǎo)大家的。

客觀、公平、公正,是我覺得最核心的標(biāo)準(zhǔn)。

所以我覺得,我想按照我的玩法,再嚴(yán)謹(jǐn)一點(diǎn)的測(cè)一下大模純數(shù)學(xué)能力型高考,給大家看一下,真實(shí)客觀的評(píng)分。

測(cè)試試卷為2025年數(shù)學(xué)全國(guó)一卷。


測(cè)試規(guī)則如下:

1. 不考解答題(因?yàn)榻o我標(biāo)準(zhǔn)答案我也看不懂,不知道咋給分。。)

2. 所有的題目截圖全部使用LaTeX編輯器轉(zhuǎn)成LaTeX文本格式,再扔給大模型進(jìn)行回答。


LaTeX是學(xué)術(shù)界最廣泛使用的數(shù)學(xué)公式排版語(yǔ)言,能最精確地表達(dá)數(shù)學(xué)符號(hào),我們考的是模型的數(shù)學(xué)能力,不是考模型的多模態(tài)識(shí)圖能力,比如DeepSeek根本就沒多模態(tài),用的是OCR提取文本,很可能識(shí)別錯(cuò)誤,所以截圖上傳不公平,一律轉(zhuǎn)化成LaTeX格式再進(jìn)行統(tǒng)一測(cè)試。

3. 剔除掉單選題第6題,因?yàn)檫@是單選、多選、填空題中唯一有圖表的,轉(zhuǎn)成文字可能會(huì)有理解歧義,同時(shí)就一題,影響不大,直接剔除。


4. 單題計(jì)分方法也依照高考判分原則:?jiǎn)芜x題7道,每道5分,選項(xiàng)正確計(jì)分,錯(cuò)誤不得分;多選題3道,每道6分,全對(duì)計(jì)6分,漏選按正確答案數(shù)量計(jì)分,如答案為ABCD,漏選其一扣1.5分,錯(cuò)選不得分;填空題3道,每道5分,填空正確計(jì)分,錯(cuò)誤不得分。

5. 每道題都會(huì)使用大模型跑3遍,根據(jù)正確比例進(jìn)行分配,最大程度減少幻覺。比如OpenAI o3模型,做單選題第7題,對(duì)2次,錯(cuò)1次,則實(shí)際得分為5*0.66=3.3分。

6. 只開推理、不使用Prompt引導(dǎo)、不開聯(lián)網(wǎng)、不允許寫代碼在沙盒進(jìn)行計(jì)算,比如o3,我直接把這幾個(gè)功能關(guān)掉了。


以上,就是全部規(guī)則了。

接下來(lái),請(qǐng)我們的模型考生入場(chǎng)。

測(cè)試模型為OpenAI o3、Gemini 2.5 pro、DeepSeek R1 、豆包( 1.5-thinking-pro) 、元寶(混元T1)、千問3(235B)、訊飛星火X1,均為推理模型。

在晚上凌晨2點(diǎn)開始測(cè)試,因?yàn)楦鉇PI寫腳本反而可能更麻煩,所以直接搞了個(gè)表格,復(fù)制粘貼測(cè)了,以至于喊了我的幾個(gè)好朋友@卡爾的AI沃茲、@Max、@貓先生 一起測(cè),硬生生測(cè)到凌晨4點(diǎn)。


7道單選題、3道多選題、3道填空題,總分一共68分。

我們得出了,我認(rèn)為,非常公平客觀的,每個(gè)模型的考試結(jié)果。

沒有收任何家錢,也沒有任何利益關(guān)系,全部客觀公正。

如下圖:


看看每一題的具體選項(xiàng)。


第9題是個(gè)非常神奇的題目,是個(gè)多選題,只有Gemini 2.5 Pro每次都對(duì)了,其他的所有大模型,幾乎全都有問題,D選項(xiàng)倒是全都答出來(lái)了,但是缺了B。

而那個(gè)DeepSeek第11道題錯(cuò)的那道題,其實(shí)并不是真做錯(cuò)了,明明做對(duì)了,但是非要作死的瞎答,比如11題多選題,DeepSeek R1錯(cuò)了一道題。

但是我給你看看,它其實(shí)是這么錯(cuò)的。


真的,太抽象了。。。

再看看,最終分?jǐn)?shù)。


Gemini確實(shí)非常強(qiáng),在整個(gè)邏輯上,沒有一題是錯(cuò)的。

而豆包、混元、星火位列第二梯隊(duì),在第9題上漏了一個(gè)選項(xiàng),并列屈居第二。

DeepSeek半對(duì)半錯(cuò)了一個(gè)多選題,丟了0.7分,排名第五。

而Qwen3和OpenAI o3因?yàn)閮蓚€(gè)都錯(cuò)了1次填空題,只能被迫墊底。。

通過(guò)我的測(cè)試,我相信,大家應(yīng)該對(duì)于模型的數(shù)學(xué)能力,有一些了解了。

其實(shí),根本拉不開差距,出錯(cuò)一般也都是小小的幻覺。

高考對(duì)于現(xiàn)在絕大多數(shù)的推理大模型來(lái)說(shuō),其實(shí)真的就是,沒有特別大的難度,跟2023年的時(shí)候,真的是天壤之別。

很多測(cè)出來(lái)測(cè)的非常離譜的文章,其實(shí)最后答案錯(cuò)了,跟推理模型本身沒有半毛錢關(guān)系,而是你把截圖扔過(guò)去,各種符號(hào)啥的識(shí)別錯(cuò)誤。

比如 則 \complement_{U} A,硬生生識(shí)別成了CuA。


所以,折騰到現(xiàn)在,這場(chǎng)公平、客觀的AI數(shù)學(xué)高考終于落幕了。

在打完最后一個(gè)結(jié)果的時(shí)候,我松了一口氣。

其實(shí)吧,我們不睡覺,熬夜折騰這么久,想得出的并不僅僅是一個(gè)簡(jiǎn)單的分?jǐn)?shù)。

而是我們我們想知道,怎么才算是一場(chǎng)合格的AI考試。

規(guī)則公正,流程嚴(yán)謹(jǐn),技術(shù)中立,少一點(diǎn)博眼球的夸張,多一點(diǎn)對(duì)真相的執(zhí)著。

我始終相信,無(wú)論是對(duì)技術(shù),還是對(duì)人生,嚴(yán)謹(jǐn)總能讓我們更接近真實(shí)。

而真實(shí),總能讓我們更加自由。

睡覺。

起床以后,一定又是美好的一天。

以上,既然看到這里了,如果覺得不錯(cuò),隨手點(diǎn)個(gè)贊、在看、轉(zhuǎn)發(fā)三連吧,如果想第一時(shí)間收到推送,也可以給我個(gè)星標(biāo)?~謝謝你看我的文章,我們,下次再見。

>/ 作者:卡茲克

>/ 投稿或爆料,請(qǐng)聯(lián)系郵箱:wzglyay@virxact.com

特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關(guān)推薦
熱點(diǎn)推薦
特朗普下令活捉加州州長(zhǎng),700名美軍已經(jīng)出發(fā),22州聯(lián)合圍攻白宮

特朗普下令活捉加州州長(zhǎng),700名美軍已經(jīng)出發(fā),22州聯(lián)合圍攻白宮

鳳凰張?chǎng)h
2025-06-10 17:11:24
43歲的蔣欣醫(yī)美了?和以前相比判若兩人,一臉苦相

43歲的蔣欣醫(yī)美了?和以前相比判若兩人,一臉苦相

楊哥歷史
2025-06-09 09:23:18
朱孝天方回應(yīng)F4合體演唱會(huì):我沒有他們3人的聯(lián)系方式

朱孝天方回應(yīng)F4合體演唱會(huì):我沒有他們3人的聯(lián)系方式

極目新聞
2025-06-10 22:42:10
美被曝派軍人入臺(tái),中方等兩國(guó)談判之際才回應(yīng),釋放信號(hào)足夠強(qiáng)烈

美被曝派軍人入臺(tái),中方等兩國(guó)談判之際才回應(yīng),釋放信號(hào)足夠強(qiáng)烈

嘆知
2025-06-11 19:52:23
湖人與凱爾特人交易震動(dòng)西部,爵士意外收獲首輪選秀權(quán)。

湖人與凱爾特人交易震動(dòng)西部,爵士意外收獲首輪選秀權(quán)。

清風(fēng)吹離
2025-06-11 11:19:21
今夏穿“渣女衫+半裙”的你,好看極了!

今夏穿“渣女衫+半裙”的你,好看極了!

Yuki女人故事
2025-06-10 21:45:14
狀態(tài)火熱!樊振東獨(dú)砍兩分&乒超單打6連勝 上海地產(chǎn)3-1黃石基地

狀態(tài)火熱!樊振東獨(dú)砍兩分&乒超單打6連勝 上海地產(chǎn)3-1黃石基地

直播吧
2025-06-11 13:40:05
女人對(duì)你“袒露”這3處秘密,就是在等你說(shuō)“我們?cè)谝黄稹?>
    </a>
        <h3>
      <a href=伊人河畔
2025-04-12 11:22:23
外媒社論|民主黨人讓斯蒂芬·米勒如愿所償

外媒社論|民主黨人讓斯蒂芬·米勒如愿所償

一半杯
2025-06-11 18:05:23
3年長(zhǎng)約+意甲頂薪!德布勞內(nèi)官宣下家,醞釀打臉瓜帥,歐冠復(fù)仇

3年長(zhǎng)約+意甲頂薪!德布勞內(nèi)官宣下家,醞釀打臉瓜帥,歐冠復(fù)仇

阿泰希特
2025-06-11 11:35:29
禁止律師喝酒:權(quán)力之手不要伸得太長(zhǎng)了

禁止律師喝酒:權(quán)力之手不要伸得太長(zhǎng)了

千千法言
2025-06-10 11:06:00
新房寫在小姑子名下后續(xù)!河南準(zhǔn)新娘直接退婚,現(xiàn)場(chǎng)退12.7萬(wàn)彩禮

新房寫在小姑子名下后續(xù)!河南準(zhǔn)新娘直接退婚,現(xiàn)場(chǎng)退12.7萬(wàn)彩禮

冬天來(lái)旅游
2025-06-11 10:22:21
中美談判已結(jié)束,中方坦然公布結(jié)果,美方代表恐很難向特朗普交差

中美談判已結(jié)束,中方坦然公布結(jié)果,美方代表恐很難向特朗普交差

萬(wàn)國(guó)明信片
2025-06-11 16:32:02
痛心!微軟裁員,致三人自殺身亡

痛心!微軟裁員,致三人自殺身亡

大白聊IT
2025-06-11 10:17:16
16場(chǎng)僅丟5球!南美第1盾:厄瓜多爾頂配防線總價(jià)1.7億+鐵腰凱塞多

16場(chǎng)僅丟5球!南美第1盾:厄瓜多爾頂配防線總價(jià)1.7億+鐵腰凱塞多

直播吧
2025-06-11 11:43:20
向麗珠、周超、李宇,班子3人同時(shí)被查

向麗珠、周超、李宇,班子3人同時(shí)被查

新京報(bào)政事兒
2025-06-11 13:25:30
A股:突破3400點(diǎn),明天(6月12日),或?qū)⑦@樣走!

A股:突破3400點(diǎn),明天(6月12日),或?qū)⑦@樣走!

財(cái)經(jīng)大拿
2025-06-11 16:25:47
北大文科生應(yīng)聘燃?xì)夤距l(xiāng)鎮(zhèn)所抄表維修工引關(guān)注;華潤(rùn)燃?xì)庀聦俟净貞?yīng):公示后未接到反映

北大文科生應(yīng)聘燃?xì)夤距l(xiāng)鎮(zhèn)所抄表維修工引關(guān)注;華潤(rùn)燃?xì)庀聦俟净貞?yīng):公示后未接到反映

大風(fēng)新聞
2025-06-09 16:39:27
不到48小時(shí)被央視除名!知名女星高考造假,這三個(gè)人要倒霉了

不到48小時(shí)被央視除名!知名女星高考造假,這三個(gè)人要倒霉了

溫讀史
2025-06-11 16:05:58
你遇到過(guò)超級(jí)主動(dòng)的女生是啥樣?網(wǎng)友:為什么沒有女人主動(dòng)接近我

你遇到過(guò)超級(jí)主動(dòng)的女生是啥樣?網(wǎng)友:為什么沒有女人主動(dòng)接近我

娛樂圈人物大賞
2025-04-10 00:30:23
2025-06-12 00:52:49
數(shù)字生命卡茲克 incentive-icons
數(shù)字生命卡茲克
反復(fù)橫跳于不同的AI領(lǐng)域,努力分享一些很酷的AI干貨
316文章數(shù) 420關(guān)注度
往期回顧 全部

教育要聞

花500萬(wàn)留學(xué)值不值,聽上海私立高中的郭老師聊一聊

頭條要聞

樊振東乒超7連勝 王楚欽坦言:沒人敢說(shuō)有信心贏他

頭條要聞

樊振東乒超7連勝 王楚欽坦言:沒人敢說(shuō)有信心贏他

體育要聞

一位中國(guó)老板,復(fù)興了歐洲百年俱樂部

娛樂要聞

那爾那茜定向委培違約事件 持續(xù)發(fā)酵

財(cái)經(jīng)要聞

美法院為何決定暫時(shí)維持特朗普關(guān)稅?

科技要聞

華為Pura80 Ultra最高定價(jià)10999元

汽車要聞

5萬(wàn)級(jí)5座純電微型車 奇瑞QQ多米正式上市

態(tài)度原創(chuàng)

本地
時(shí)尚
房產(chǎn)
親子
軍事航空

本地新聞

非遺里的河南 | 黃河泥變身千年墨寶,寫字都帶仙氣兒~

“美式復(fù)古風(fēng)”越來(lái)越火,照著穿減齡又時(shí)髦

房產(chǎn)要聞

曝光!食堂問題頻發(fā),海口這所名校被重罰百萬(wàn)!

親子要聞

西蒙愛哭愛鬧摔東西?我覺得他更多的是戲精而已!

軍事要聞

加州請(qǐng)求阻止特朗普政府派兵被駁回

無(wú)障礙瀏覽 進(jìn)入關(guān)懷版 主站蜘蛛池模板: 台东县| 保山市| 波密县| 兴安盟| 都江堰市| 马边| 静海县| 勃利县| 平邑县| 怀集县| 阳西县| 雅安市| 大竹县| 广元市| 南溪县| 海宁市| 台中县| 鹤庆县| 拉孜县| 白河县| 南华县| 彭州市| 孝昌县| 平度市| 北宁市| 怀仁县| 石河子市| 大理市| 宿州市| 营口市| 甘洛县| 成武县| 红桥区| 玉山县| 东乌珠穆沁旗| 通辽市| 商洛市| 闸北区| 华亭县| 沂南县| 西昌市|