
HLE评测26.9%对比59%、GDPval分值1314对比1932:Gemini 3.5 Pro推理短板远比预想严重
几组基准数据摆在一起,差距已经不需要修饰。
人类终极综合推理测试(HLE)
HLE是业内公认的硬核深度推理标尺,主打数学、理科、人文、逻辑交织的长链条推演,且不考联网检索——纯拼模型"底子"。
无工具辅助:Fable 5得分59.0%,Gemini 3.5 Pro仅26.9%;
可调用工具:Fable 564.5%,Gemini 3.5 Pro仅40.5%。
仅看无工具赛道,Fable 5的推理能力约是Gemini 3.5 Pro的2.2倍,分差32个百分点。这已经不是小幅领先,而是不在同一层级。
企业商用价值基准GDPval AA
由Artificial Analysis推出,衡量真实职场中具备商业价值的任务处理能力,比传统学术评测更贴近办公生产力。
Fable 5以1932分登顶,领先Opus 4.8(1890分)、GPT-5.5(1769分);Gemini 3.5 Pro仅1314分,分差618分。
工程类专项基准
基准 | Fable 5 | GPT-5.5 | Gemini 3.5 Pro |
|---|---|---|---|
SWE Bench Pro(全仓库代码工程) | 80.3% | 58.6% | 54.2% |
Terminal Punch 2.1(终端开发) | 88.0% | — | 70.7% |
图文多模态文档推理 | 29.8% | — | 16.7% |
所有数据指向同一个结论:深度推理、长链条逻辑推演、仓库级大型软件工程这类任务,Gemini 3.5 Pro与Fable 5之间存在短期难以抹平的鸿沟。
谷歌不是没补救,是补救完仍不够
为补齐推理短板,DeepMind干脆弃掉Gemini 2.5 Pro原有底座,对3.5 Pro做完整全新预训练——不是微调、不是补丁,是推掉底层从头训。代价是发布从6月延到7月17日,延期期间多名核心AI研究员相继离职。
但重训并未带来质变。爆料者直言,即便换了新底座,Gemini 3.5 Pro"在高难度智能代理、超长链路推理任务上依旧无法超越Fable 5与GPT-5.6"。数学推理的重训仅小幅缩距,没改写竞争格局。
但Gemini 3.5 Pro有一条自己的强赛道:前端与可视化
这也是所有泄露信息里统一印证的强项。
设计审美贴近专业设计师水准,UI干净,SVG矢量图生成大幅跃升,单条提示词能出完整美观的页面。LMSYS竞技场SVG专项测试中,Gemini 3.5 Pro表现优于高配版Fable 5,开发者社区甚至有"碾压"一说。
前端一枝独秀,不等于综合实力领跑。Fable 5在全仓库开发、深度调试、架构重构等重型工程里仍是顶尖;GPT-5.6在多步复杂推理榜单稳居上游;Gemini 3.5 Pro在这两块始终落后。
这其实是谷歌主动选的差异化路线
据业内消息,谷歌把Gemini 3.5 Pro定位为"高端竞品的高性价比替代方案",没打算正面冲Fable 5的优势赛道——那块是重度工程、高密度逻辑推理的主战场。
谷歌另辟的蹊径是:靠200万Token超长上下文 + Deep Think深度推理 + 前端生成三张组合牌,去啃Fable 5和GPT-5.6覆盖不到的细分市场——长文档深度分析、科研级多步推演、前端批量视觉生成之类。
推理基础弱并不可耻;认清短板、找稳独有优势,才是产品策略的本分。
7月17日Gemini 3.5 Pro正式上线后数据会全公开,但答案大致已清晰:它不会在Fable 5的优势领域反超,只会在竞品无暇深耕的赛道,辟出自己的市场空间。
7月17日之后,双旗舰对照评测的接入账
Gemini 3.5 Pro重训数学+前端突围,Fable 5守硬核推理+工程纵深——这组数据出来后,国内技术团队大概率会跑一轮"Fable 5 vs Gemini 3.5 Pro"的对照评测:HLE能不能从44.4%拉到55+、前端SVG是不是真反超、200万上下文长文档分析值不值Deep Think的60美元/百万Token。
这里有个更前置的现实:
Fable 5每百万输出Token官方价 50美元;
Gemini 3.5 Pro的Deep Think每百万输出Token预估 60美元,且仅Google AI Ultra(250美元/月)可用;
双旗舰对照 + 全仓库调试 + HLE类长链推理批量跑,月度token消耗一上来,账单先跳。
评测阶段多跑几轮实验,预算就先扛不住——Deep Think属于"关键时刻才请的顾问",但凡评测密集,单价会先显出来。
UseAIAPI目前把全球主流大模型做了一站式打通,Gemini、Claude、ChatGPT、DeepSeek等最新版本均在接入池内,企业级定制可按业务口径配置,省掉官方直连的额度申请、合规核验那堆杂活。价格层面,平台优惠折扣最低可达官方价的50%——对应Deep Think、200万上下文长会话、硬核推理这类高单价场景,相当于同等预算调用量翻倍,双旗舰评测和高强度推理不用再为账单犹豫。
Fable 5的工程纵深 + Gemini 3.5 Pro的全局广度 + 前端突围,本就不是零和。把两条路线都接进来,按场景挑模型,7月17日之后这笔账会更好算。