Kimi K2.7 Code 是否比 K2.6 更适合团队处理缺陷,不能只看基准分数。月之暗面在产品介绍中称,新模型在其评测中提高了编程任务表现,平均思考 Token 用量较 K2.6 减少约 30%。但这一数字不是“修一个缺陷少花 30% 费用”的承诺。目前可用资料不包含两款模型在同一代码库、同一任务和环境下的完整运行记录,因此本文不将官方基准或第三方测试冒充为本次实测结果。
同任务测试,先固定什么
团队可从有稳定测试套件的代码库中选取数个已知缺陷,保留修复前的同一提交,并为每个任务准备一致的缺陷描述和验收条件。两款模型分别从干净工作区启动,使用相同的编程工具、权限、依赖版本和运行环境;每次仅切换模型,不把上一轮的修复或对话带入下一轮。

至少覆盖三类任务:能由失败测试复现的局部缺陷、需要跨文件追踪的调用链问题,以及容易出现“测试通过但改错行为”的边界条件缺陷。每类任务重复运行,记录失败与重试,而不是只展示成功案例。提交的改动除通过自动化测试外,还应由不知晓模型身份的评审者检查:是否真正修复问题、是否引入回归、是否扩大了不必要的修改范围。
| 每次运行记录 | 判定或用途 |
|---|---|
| 定位与修改 | 找到根因、修改文件及范围,保存补丁 |
| 验收结果 | 原有测试、新增针对性测试、人工复核分别记录 |
| 完成时间与工具调用 | 从任务开始至交付补丁计时;记录命令、读写文件及重试次数 |
| Token 消耗 | 分别记录输入、输出、可获得的思考 Token,以及计费口径 |
| 实际费用 | 按测试时适用的官方价格和账单核对,不由思考 Token 降幅推算 |
“少想 30%”要怎样验证
先比较成功修复率:成功应同时满足缺陷被修复、测试通过和人工复核通过。再只对成功任务比较完成时间与消耗,并同时报告全部尝试的总消耗。否则,一个模型虽然单次用量较低,却因失败后反复重试而花费更多,结论仍可能被误读。
思考 Token、总 Token 和费用必须分开看。官方所称约 30% 针对平均思考 Token;工具输出反复进入上下文会增加输入 Token,补丁说明和测试日志也可能改变输出用量。若调用接口不单独提供思考 Token 指标,就不能用总量反推出“思考减少了多少”。测试记录还应保留模型标识、调用时间及原始用量返回值;发布结果前,需再次核验两款模型的可用状态、对应接口的计费文档与账单口径。
在上述运行数据缺席的情况下,本次不能给出两款模型的缺陷修复成功率、耗时或费用胜负。官方基准提示了值得验证的方向,但不能代替团队自己的代码库测试。
【软盟资讯观察】
编程模型升级的收益,可能来自更少的无效推理,也可能来自更准确的定位和更少的返工;三者不一定同步。对高频使用 AI 编程工具的团队而言,值得关注的是“每个合格修复的综合成本”,而非单次请求的 Token 数。如果新模型缩短了等待时间,却更常需要人工改补丁,效率收益就会缩水;反过来,即便单次调用较贵,只要能减少失败重试,也可能更划算。
评测同样有边界:缺陷难度、测试覆盖率、工具配置和模型随机性都会改变结果,少量任务不足以代表所有项目。团队更稳妥的做法是先用自有仓库开展小规模、可复跑的盲测,公开失败样例和计费口径,再决定是否扩大使用范围。官方约 30% 的思考 Token 降幅应被当作待检验的假设,而不是采购预算中可以直接兑现的节省比例。
