本文整理自B站科技迷航的「谁才是DeepSeek的最佳坐骑?」,通过音视频转录工具Ai好记转录整理,以下为精炼整理后的内容。

在这里插入图片描述


测试背景

DeepSeek V4 Flash正式版发布后,能力已经非常可用,但DeepSeek一直没有官方IDE,开发者只能搭配第三方框架来使用。市面上第三方框架众多——Codex、OpenCode、ClaudeCode、ZCode、Reasonix等,它们对模型能力的具体影响有多大?哪个效果最好?哪个速度最快?哪个最省钱?一直缺少系统性的横向对比。

本次测试选取了五个主流AI编程框架,统一接入DeepSeek官方API,思考程度开到最大,通过7道真实项目测试题进行全方位评测。

测试设计

题目设置

测试设计了7道题目,覆盖多种真实开发场景:

  • 三道编程排障题:测试Bug修复能力
  • 一道编程开发题:测试新功能开发能力
  • 两道信息推理与核查题:测试逻辑推理和事实核查能力
  • 一道数据处理题:测试数据处理能力

评分规则

每个题目设有多个评分大项,每个大项内包含若干小项,各有对应分值。一次通过拿满分,两次通过拿一半分值,三次通过得四分之一分值。

逐题战况

第一题:编程热身

开场热身题,Codex一骑绝尘,首轮拿下91分。OpenCode和ClaudeCode首轮也在70分以上。第二轮各选手全部通过。

最终成绩:Codex遥遥领先,耗时14分钟。ZCode速度最快,仅8分钟。ClaudeCode最慢,用了半小时。

第二题:高难度Bug修复

难度骤升,各选手均遇挑战。Codex表现大反转——耗时80多分钟,得分最低,甚至在第三轮将前面已修复的Bug改错。

表现较好的是ClaudeCode和ZCode,均得70多分。ClaudeCode得分稍高且速度更快,ZCode则是改对Bug数量最多的选手。

第三题:Codex的起伏

Codex首轮取得最高分,但第二轮又将首轮修好的Bug改错,最终垫底。其他选手稳扎稳打,ZCode凭借首轮优势拿下第一。

耗时方面:Codex用了85分钟,仍是全场最慢;ClaudeCode最快,仅25分钟;ZCode耗时38分钟,同样优秀。

第四题:功能开发

新功能开发对各选手相对友好,首轮表现都不错。ZCode和ClaudeCode首轮均得95分,Codex和OpenCode得80分。

三轮修改后,ZCode犯了一个类似Codex的错误——将之前做好的功能弄坏,只剩90分。Reasonix和ClaudeCode并列第一。ClaudeCode速度最快,仅22分钟。

第五题:信息推理

从一堆信息中推理出正确事实,题目难度不高。Codex首轮犯了一个小错误,第二轮才改对,用时最多。其余选手均一轮满分通过。

第六题:信息核查

最具挑战性的一道题。准备了20篇参考文献:10篇真实论文,10篇虚假论文(其中3篇凭空捏造,7篇从真实论文修改而来)。

有趣的现象是:多数选手(Codex、ZCode等)将一篇真实论文误判为虚假,而ClaudeCode将一篇虚假论文误判为真实。两种错误类型反映不同框架在判断逻辑上存在细微的倾向性差异。

第七题:数据处理

难度不高,各选手均得95.5分。

总成绩汇总

得分排名

排名 框架 总分
1 ClaudeCode 621
2 ZCode 接近621
3 Reasonix 约615
4 Codex 约610
5 原生DeepSeek 约600

整体得分差距不大,但Codex的起伏表现和原生DeepSeek的垫底值得关注。

速度对比

ClaudeCode在得分最高的同时速度最快。ZCode得分第二、速度第二,且与ClaudeCode非常接近。Reasonix最慢,比优秀选手慢了半小时。Codex速度也不佳,且干活时反馈少,使用体感较差。

成本对比

框架 花费
ZCode 4.7元
OpenCode 4.8元
ClaudeCode 6.0元
Codex 6.0元
原生DeepSeek 7.5元

ZCode成本最低,OpenCode紧随其后。原生DeepSeek反而最贵。

综合结论

ZCode以最低成本(4.7元)、得分第二、速度第二的成绩,成为本次测试中性价比最高的框架。与得分第一的ClaudeCode相比,ZCode在价格上有明显优势,得分却非常接近。综合性能、速度和价格三维度,ZCode被评选为本次测试的最佳「坐骑」。

分析认为,ZCode的底层LM与DeepSeek适配良好,这是其综合表现优异的重要原因。

开发者选型建议

  • 追求极致性能且预算充足:选择ClaudeCode
  • 追求高性价比:选择ZCode
  • 需要稳定体验和快速反馈:谨慎选择Codex,其在复杂场景下表现不稳定
  • 预算敏感:OpenCode是另一个低成本选项

以上内容由Ai好记转录整理。Ai好记 是一款音视频转图文笔记的 AI 学习助手,支持 B站、抖音、小宇宙等平台链接及本地音视频文件,转入后自动生成精华速览、思维导图和结构化笔记,帮助你把几小时的视频内容变成可搜索、可复习的图文笔记。
在这里插入图片描述

Logo

欢迎加入DeepSeek 技术社区。在这里,你可以找到志同道合的朋友,共同探索AI技术的奥秘。

更多推荐