最近 AI 界更新频繁,特别是 Grok 4.5 上线后,大家都在讨论它的实际表现到底有没有传说中那么神。作为经常需要折腾代码的开发者,光看官方 PPT 是没用的,还得看实战效果。

正好看到一位技术大牛做了一次非常硬核的「模型横评 3.0」,这次测试的方法论非常严谨,甚至引入了 GPT-5.5 来辅助出题和评分,比起那种跑分软件要有参考价值得多。今天我就把这次测试的干货拆解一下,聊聊大家最关心的几个模型在代码开发上的真实表现。

⚙️ 极其严谨的“五步走”测试法

这次测试没有随便搞几个 Hello World 级别的题目,而是基于一个真实的闭源项目作为基座。为了避免人类出题的主观偏差,整个流程设计得非常有意思:

  1. 自动出题:先让 GPT-5.5 根据项目代码库,通过自问自答的形式生成 6 道技术题目。
  2. 智能筛选:在 6 道题中,再让 GPT-5.5 通过自我评估筛选出 2 道最具挑战性的题目。
  3. 并行执行:开启 Git Work Tree,让 Grok 4.5、composer-2.5、GLM-5.2 等不同模型,甚至配合 Cursor 等不同的 Agent 环境去独立执行这两个任务。
  4. 单盲评测:任务完成后,依然由 GPT-5.5 对每个分支的结果进行单独打分。
  5. 归一化复核:最后把所有模型的分数拉平进行横评对比。

这种模拟真实开发流(生成任务 -> 编码 -> 代码审查)的测试,能最直接地反映出我们平时写代码时的体验。

📊 实测结果:谁才是开发之王?

直接上核心结论,这次的横评覆盖了 Grok 4.5、Grok 4.5 fast、composer-2.5、GLM-5.2 等热门选手。

从归一化后的评分来看,Grok 4.5 的表现确实可圈可点,尤其是在复杂逻辑的处理上,不仅完成了任务,代码的可维护性也得分很高。相比之下,之前的某些版本虽然速度快,但在深度推理上还是稍逊一筹。

模型横评结果对比图表

不同模型在代码任务中的归一化评分对比

composer-2.5GLM-5.2 也在不同维度上展现了极强的竞争力。特别是 composer-2.5,在某些特定架构的任务执行中,效率和准确率的平衡做得非常出色。

大家最关心的 Cursor + Grok build 组合,测试结果也很有参考价值。IDE 的深度集成加上强模型,确实让开发效率提升了一个档次,但在某些边缘情况的代码生成上,依然需要人工介入微调。

💡 开发者怎么选?

看完这次横评,给咱们普通开发者一点建议:

  • 追求极致效能:如果你在做复杂的架构重构或核心算法逻辑,Grok 4.5 这类强推理模型依然是首选。
  • 日常快速迭代:如果是写简单的页面逻辑或者 CRUD,fast 版本的模型或者 composer-2.5 可能性价比更高,响应速度快,能显著减少等待时间。
  • IDE 很重要:不要只盯着模型,配合好用的 IDE(如 Cursor)能发挥出 1+1>2 的效果。

这次测试的详细扣分点和加分项都有记录(原文附带了具体的评测表文件),感兴趣的朋友可以去深挖一下每个模型到底是在哪里“翻车”了。毕竟,知道别人的坑,能帮自己省不少调试时间。

AI 辅助编程已经进入深水区,单纯的对话式生成已经不够用了,像这种基于项目上下文的实战能力,才是未来比拼的关键。

标签: none

AI Skills Smart Station on Nick Launches

评论已关闭