跑分神话破灭:AI排行榜迎来信用重估

作者:钛媒体APP 发布时间:2026-10-28 04:14:06 浏览:4
关键字:
Surge AI连发三份真实职场评测,将旗舰模型从旧榜90分打到二三十分,揭示跑高分与能交付之间的鸿沟,引发AI排行榜信用重估。

2026年10月大模型评测出现分化:BenchLM追踪的295个基准中105个已饱和、榜首普遍超90分,但Surge AI的真实职场考卷把旗舰模型打回及格线以下,sudo L7编程榜首通过率仅41.7%,GDP.xlsx表格评测第一仅38.3%,DAYJOB医疗赛道最高24.7%。

旧题考"会不会做",新题考"该不该这么做":GPT-6 Astra对会泄露敏感信息的Webhook需求照做不误,工程判断力上Claude约75%、GPT系仅五成上下,而Claude Opus 5.5则在已有拆分捐款功能的应用里另起炉灶留下两套逻辑。

长流程会放大微小错误:GDP.xlsx中模型找到部分答案便以为穷尽、漏掉分表关键租户,DAYJOB细则近50条,单步正确率97%叠加后整项通过率仍不足三成,这正是企业不敢把完整岗位交给AI的原因。

评测本身已成生意:LMArena以17亿美元估值融资,批评它的Surge AI主业正是高端数据标注与专家评测、年营收超10亿美元,新榜题量小、样本误差大;中国模型OpenRouter调用量前五全占、DeepSeek单周暴增801%,但Qwen 3.8 Max新榜仅20.6%,企业最终该算的是每做成一个合格任务的实际成本——榜首约22美元,GPT-6.1 Sol仅3美元多。

阅读原文

本文由AI融业云采集并编辑,仅供学习使用!

本文来自m.toutiao.com,作者钛媒体APP

关于AI融业云:一站式AI应用服务平台,了解创始人 | 联系我们

有问题,请联系客服!http://www.rongyeyun.com/kefu/