厂商视角从 Opus 起步、最难任务升到 Fable,是作者对自家产品的推荐。文中依据包含厂商运行的公开基准和内部基准,没有提供跨厂商结果,不能据此认定应替换快照中的 Codex 默认模型。
自己验证用同一批实际研究与编码任务,固定输入、工具、权限和完成判据,比较当前配置与候选配置的验收结果、总成本和耗时;把不能取得原始运行记录的厂商结论保留为待验证假设。
数字口径模型与 effort 必须一起读:Fable 5.2 的 high 与 Opus 5.5 的 max 接近,只支持该基准下这组配置的比较。另一个例子中,Opus 的 xhigh 相对 high 多约 1.4 个得分点,却花费 2.5 倍,也不能套用到 gpt-6.1-sol。
自己验证对每次运行记录实际模型、effort、计费渠道、输入输出与缓存用量,费用按实际渠道核算;在同一任务集上画质量与费用关系,并单独检查支出最高的任务。
数字口径low 加失败重跑的收益来自特定 SWE-bench Pro 子集;原文未交代重跑上限、完整计费分母和重复运行波动。约 97% 的结果也不能证明这条策略在其他任务上更准确。
自己验证保留全部尝试和失败费用,同时报告总费用除以提交任务数、总费用除以验收通过任务数;重复运行相同样本,并用已知错误结果检查验收器是否会错误放行。
可复现性廉价子代理的实际身份与输入长度都需要核对。原文称内置 Explore 使用会话模型,haiku 别名在不同接入渠道可能指向不同模型;Claude Code 被标记的请求还可能改由旧模型重跑,不能只按配置名给结果归因。
自己验证在实际渠道用小样本确认 CLI 版本、别名解析和最终运行模型,核对转录中的回退通知,并记录输入长度与计费。若计划使用 Haiku 5.5,再比较 100K 阈值两侧的真实任务费用,不能把较长输入截短后仍视为同一任务。
可复现性迁移风险不止接口报错,还包括推理块被静默丢弃。原文也要求自行构造的多模型请求满足更严格的历史、工具与内容块契约;这些要求不应未经检查就套到现有 Jev 调用入口。
自己验证若未来使用文中的 Claude API 组合,在隔离测试中分别验证模型切换、历史修改、thinking 设置、工具选择和响应解析;同时记录错误、usage 与上下文摘要后的任务表现。对 Claude Code 使用转录中的实际模型通知核对切换,API 成功只作为接口通过的证据。
遗漏advisor 与批量 workers 的收益证据有限。批量 workers 的省钱例子来自超大代码缺陷搜索,也不能证明内容研究任务值得并行。
自己验证先测单模型基线,再分别增加 advisor 或 workers,记录咨询是否发生、是否纠正错误、规划合并成本与最终验收结果;只有组合在同等质量下带来可重复的收益才保留,不把调用了更强模型或更多代理本身计为成功。
遗漏技能列表也没有提供技能正文。已有台账不能替代这些文件的当前状态。
自己验证后续取得相关配置的只读快照,再逐项核对实际模型、effort、验收命令、计费渠道和任务状态,并与台账去重;在此之前,不给未见文件指定具体改动或假设旧建议已经实施。