2026年10月大模型评测出现分化:BenchLM追踪的295个基准中105个已饱和、榜首普遍超90分,但Surge AI的真实职场考卷把旗舰模型打回及格线以下,sudo L7编程榜首通过率仅41.7%,GDP.xlsx表格评测第一仅38.3%,DAYJOB医疗赛道最高24.7%。
旧题考"会不会做",新题考"该不该这么做":GPT-6 Astra对会泄露敏感信息的Webhook需求照做不误,工程判断力上Claude约75%、GPT系仅五成上下,而Claude Opus 5.5则在已有拆分捐款功能的应用里另起炉灶留下两套逻辑。
长流程会放大微小错误:GDP.xlsx中模型找到部分答案便以为穷尽、漏掉分表关键租户,DAYJOB细则近50条,单步正确率97%叠加后整项通过率仍不足三成,这正是企业不敢把完整岗位交给AI的原因。
评测本身已成生意:LMArena以17亿美元估值融资,批评它的Surge AI主业正是高端数据标注与专家评测、年营收超10亿美元,新榜题量小、样本误差大;中国模型OpenRouter调用量前五全占、DeepSeek单周暴增801%,但Qwen 3.8 Max新榜仅20.6%,企业最终该算的是每做成一个合格任务的实际成本——榜首约22美元,GPT-6.1 Sol仅3美元多。
