刘橙绿
关注我

No.015 · AI工具 · 2026.09

大黑鲸鱼来啦!DeepSeek Harness五项实测!它能不能比肩Claude code ?

原文链接:飞书原文 ↗

盼星星盼月亮

大蓝鲸鱼的大黑鲸鱼终于上线预览版了!!!

图片为“大黑鲸鱼来啦!DeepSeek Harness五项实测!它能不能比肩Claude code?”的AI实测报告封面。背景为浅色,左侧有绿色和橙色几何图案。上方文字为“AI实测报告”,中间大字标题为“大黑鲸鱼来啦!DeepSeek Harness五项实测!它能不能比肩Claude code?”,右侧有两位穿着女仆装的卡通人物,左侧人物为蓝发蓝眼,右侧人物为黑发蓝眼,右侧人物头戴金色皇冠。该图片与文档中介绍DeepSeek Harness五项能力实测的内容相关,起到吸引读者关注的作用。

这是一张q版风格的卡通形象图,形象以拟人化的鲸鱼搭配女仆穿搭,是本次DeepSeek相关实测内容的趣味配图。这个角色有着黑色长发,发尾带蓝色挑染,头顶有翘起的呆毛,蓝色大眼睛,脸颊带俏皮的可爱神态。她穿着黑色女仆连衣裙,搭配白色蕾丝镶边的围裙,围裙上印有黑色鲸鱼图案,裙身装饰有蝴蝶结,还有白色蕾丝发箍、蓝色发饰以及鲸类鳍状的耳饰,身后露出鲸鱼尾,整体形象呼应了“大黑鲸鱼”的主题,风格软萌可爱,与本次DeepSeek Harness的实测内容搭配,增添了轻松的阅读氛围。

这是一张Q版风格的卡通插画,画面里是两位女仆装扮的小女孩,都有着鲸鱼类的尾部元素,呼应文档中“大黑鲸鱼来啦”的主题。左侧女孩有着渐变蓝色长发,正笑着为右侧黑长发女孩戴上一顶装饰华丽的金色王冠,右侧女孩双手叉腰,表情傲娇,两人的服饰上都带有鲸鱼图案作为装饰,形象可爱灵动,契合相关产品的拟人化创作风格。

这一个月DeepSeek真是站在风口浪尖上

先是DeepSeek v4 flash正式版杀疯了

然后是DeepSeek宣布涨价后,出现了梁文峰滑动变阻器

接下来又是昨晚DeepSeek V4pro正式版虚晃一枪

今天刚好让我们来测试下DeepSeek Harness效果怎么样!

图片展示的是DeepSeek Harness的内测声明界面。声明指出,目前0.1版本仍在面向Harness开发者进行测试,存在改进和打磨空间,希望收集反馈。DeepSeek Harness的核心组件及基础API预计在接下来一段时间内快速迭代、持续演化。界面底部有“继续”按钮,背景为灰色,左上角有“新会话”标识,右上角有“工作区”标识。该图片与上下文紧密相关,是对DeepSeek Harness当前状态及未来规划的说明,为后续测试做铺垫。

DeepSeek Harness 五项能力实测

我们今天测试的是:

DeepSeek 有了自己的 Harness 以后,到底能不能成为一个完整的 Coding Agent?

真正的 Agent 需要自己规划、调用工具、发现问题、重新修改,甚至把任务交给其他 Agent。

DeepSeek Harness

所以今天我们用五关看看:

DeepSeek Harness到底有没有资格对标 Claude Code 和 Codex。


测试准备

我们今天的测试围绕一个项目进行:

第一关让 DeepSeek 自己从零创建。

后面的四关全部接着这个项目继续测试。

从创建

→ DeepSeek指挥其他DeepSeek干活 → 联网补充数据 → 出 Bug 后自己修复 → Harness 自我成长


第一关:DeepSeek自主建立项目

我们先测试最基本的 Agent 能力:

我只给目标,它能不能自己决定怎么完成。

不告诉它先创建什么文件,也不告诉它用什么框架。

直接输入这段

在当前目录从零创建一个名为 agent-radar 的项目。

>

它是一个简单、现代、有科技感的 AI Agent 项目 Dashboard。

>

页面至少包含:

>

1. AI Agent 项目卡片 2. 搜索 3. 分类筛选 4. 收藏 5. 深色模式

>

在开始编码之前,先自己分析任务,制定 Plan,并建立 Todo。

>

然后按照自己的计划执行。

>

你可以自主创建文件、安装依赖、运行命令和修改代码。

>

完成以后必须自己启动项目并进行验证。

>

如果发现报错,继续修复,直到项目可以正常运行。

>

不要询问我下一步应该做什么,除非涉及真正需要人工授权的操作。

这张图片展示的是DeepSeek Harness工具在创建AI Agent项目Dashboard时的对话界面,核心内容是用户要求DeepSeek从零创建名为agent-radar的项目,需满足项目包含卡片、搜索、分类筛选等八项要求,完成后需自行启动项目并验证,出错需自行修复,且不得向用户询问非人工授权的下一步操作,界面还显示当前对话上下文注入内容、工具状态等辅助信息,体现了DeepSeek自主建立项目的交互设置,和文档中介绍的DeepSeek自主创建项目的测试内容相呼应。

跑了十几分钟后,DeepSeek交出了他的答卷

图片展示的是Agent Radar界面,显示13个Agent项目,8个在线运行,0个已收藏,13个当前命中。界面中有多个Agent选项,如Nova Chat、CodeForge、DeepEyes等,每个Agent下方有简要介绍、评分、用户数及版本号等信息。其中,DeepEyes被突出显示,其介绍为“深度生成,支持图像识别、续集描述、风格迁移等高精度生成能力”。该图片与上文“DeepSeek自主建立项目”内容相关,展示了DeepSeek完成项目后的Agent雷达界面情况。

通过标准

最终项目正常运行。

并且整个过程基本没有要求我一步一步指挥。


第二关: 多 Agent 协作:DeepSeek指挥其他DeepSeek干活

这一关开始真正体现 Harness。

我要看看:

DeepSeek 能不能自己调度多个 Agent。

Claude Code codex 以及其他知名产品,都有调用多个agent完成能力的功能。

DeepSeek 想坐到同一张桌子上,这项很重要。

我们来看看DeepSeek能不能指挥其他DeepSeek干活?

直接输入

现在检查刚才创建的 agent-radar。

>

请使用 Subagent 并行完成三个独立任务:

>

Subagent 1:检查 UI 和视觉体验。

>

Subagent 2:检查代码质量、项目结构和潜在 Bug。

>

Subagent 3:检查功能是否正常,包括搜索、筛选、收藏和深色模式。

>

主 Agent 不要直接替三个 Subagent 完成检查。

>

等三个 Subagent 返回结果后,由主 Agent 汇总结论、判断优先级,并完成最值得修改的三个问题。

>

修改结束后重新运行并验证项目。

图片展示的是DeepSeek在多Agent协作测试中的对话界面。主Agent被要求检查“agent-radar”项目,使用Subagent并行完成三个独立任务:Subagent 1检查UI和视觉体验,Subagent 2检查代码质量等,Subagent 3检查功能是否正常。主Agent需汇总结论、判断优先级,完成最值得修改的三个问题。该图片与上下文紧密相关,直观呈现了主Agent的指令内容,是DeepSeek多Agent协作测试过程中的关键环节。

DeepSeek交出了这份答卷

完成的相当不错,速度也非常快。

该图片展示的是DeepSeek三方Subagent审查结论与优先级的内容节选,上方标注了“测试2:让DeepSeek指挥Deep...”等相关上下文信息。图片中呈现了三个Subagent交叉验证出的核心问题,每个问题均标注了对应严重度、具体问题内容及所属Subagent来源,其中有高严重度的“useLocalStorage 无运行时校验,存储值损坏时 favorites.includes 报错→整页白屏”“卡片底部信息栏溢出,.meta-model 缺min-width:0,版本号被截切”等,还有中等严重度的问题,底部说明需按“影响×修复价值”选出Top3,涵盖崩溃级校验、搜索字段缺口、主内容裁切方向。

通过标准

不同agent真正完成不同工作。

主 Agent 最终完成整合和修改。


第三关:跨工具连续执行

我要测什么呢?

现在测试 Harness 最核心的价值之一:

模型能不能连续使用不同工具完成一个真实目标。

这里不能只写代码。

它需要:搜索互联网,读取资料,整理信息,修改文件,运行命令,最终验证网页

直接输入

继续完善 agent-radar。

>

请使用当前 Harness 可以使用的 Web 搜索能力,寻找目前值得关注的 5 个开源 AI Agent 项目。

>

尽量读取项目的一手资料。

>

为每个项目整理:

>

项目名称、主要用途、核心特点、项目链接。

>

然后把这些真实信息加入当前 agent-radar 页面。

>

不要只把搜索结果告诉我。

>

你的最终目标是把信息真正写入项目并展示在网页中。

>

完成后启动项目,检查数据是否正常显示。

>

如果中途任何工具调用失败,请自己选择替代方案继续完成任务。

图片展示的是DeepSeek Harness测试中跨工具连续执行能力的对话界面。上方显示“测试3跨工具连续执行能力”及“标准模式”,右侧有“Session”选项。对话内容中,用户要求继续完善agent-radar,使用Harness AI以Web搜索能力寻找5个关注的AI Agent项目,整理项目名称、用途、特点、项目链接,最终写入网页。下方有“permission”和“上下文注入”等指令,以及“@deepsseek -ai/dsh -system -prompt”等信息。该图片与上下文紧密相关,呈现了任务要求及用户与AI助手的交互情况。

通过标准

网页最终出现真实搜索得到的数据。

整个过程中我没有人工复制粘贴搜索结果。


第四关:故障自救

这一步,我们耍点花招,

我们删掉其中任意一个文件,然后交给DeepSeek去审查,看它能不能找到这个错误。

真正的 Agent 经常都会犯错。

所以重点是他能不能快速发现并且改正错误·。

现在看看 DeepSeek 能不能做到。

直接输入

agent-radar 现在出现了故障。

>

我不会告诉你故障在哪个文件,也不会告诉你是什么原因。

>

请你自己:

>

运行项目;

>

读取错误;

>

定位根因;

>

修复问题;

>

重新运行;

>

验证功能。

>

如果第一次修改没有解决问题,继续诊断。

>

在真正验证项目恢复正常之前,不要宣布任务完成

这张图片是大黑鲸鱼(DeepSeek)的测试界面截图,对应文档中故障自救关卡的测试场景。界面右侧的对话内容显示,该AI自主检测到agent-radar出现故障,明确给出了处理故障的完整步骤,即自行要求完成运行项目、读取错误、定位根因、修复问题、重新运行、验证功能的操作。界面下方的上下文注入区域,标注了DeepSeek执行指令的内容,该AI在此测试中自主识别出故障,符合文档中“它自己找到我制造的问题”的结果描述。

可以看到DeepSeek非常快的就找到了我偷偷删改的文件,然后马上把他就补全了回去。

全程花费2分钟

图片展示的是DeepSeek在故障自救测试中,对“我自己改代码”场景的修复过程及验证结果。显示DeepSeek快速定位并修复了因删除“tsconfig.json”文件导致的“tsc --noEmit”和“vite build”失败问题,修复后通过“tsc --noEmit && vite build”验证,结果均为“退出码 0”。该图片与上下文紧密相关,直观呈现了DeepSeek在故障自救测试中的表现,验证其能快速定位并修复问题。

通过标准

它自己找到我制造的问题。

项目恢复正常。

问没有告诉它 Bug 在哪里。


第五关:Harness 自我扩展

最后来一个真正属于 Harness 的测试。

DeepSeek Harness 的公开架构里甚至已经存在 self-modification 模块,官方仓库对这一部分的描述是让 Agent 检查和挂载自己的插件。

所以最后我想看看:

它能不能理解自己的 Harness,并给自己增加一个工作能力。

直接输入

现在不要继续普通开发。

>

请先检查你当前 DeepSeek Harness 可以使用的 Plugins、Skills、Tools 和相关能力。

>

我要测试 Harness 的扩展能力。

>

请尝试为当前工作环境增加一个简单、可验证、项目级的能力:

>

创建一个名为 project_health 的能力。

>

它运行以后至少能够检查当前 agent-radar 项目的:

>

1. 源代码文件数量 2. TODO / FIXME 数量 3. 当前项目是否可以成功 Build

>

优先使用 DeepSeek Harness 当前支持的 Plugin、Skill 或 Self Modification 机制实现。

>

不要修改当前项目之外的重要系统配置。

>

完成以后必须真正加载或调用这个新能力一次,并展示运行结果。

>

如果当前 Developer Preview 暂时无法安全完成某种扩展,请明确指出受限在哪一层,并尝试使用 Harness 当前支持的其他扩展机制完成同样目标。

图片展示的是大黑鲸鱼DeepSeek与用户关于检查并扩展Harness能力的对话界面。用户要求DeepSeek测试Harness扩展能力,创建名为“project_health”的能力,能检查源代码文件数量、TODO/FIXME数量及项目是否能成功Build,需使用当前支持的机制实现。DeepSeek回复称当前不要继续普通开发,需先检查其可使用的Plugins、Skills、Tools及相关能力,还提到中间撞上Harness沙箱权限限制,但会换路径继续完成任务。

这一关居然真的跑通了。

DeepSeek 给自己创建了一个工具,而且这个工具已经被 Agent 注册、调用,并实际执行了项目 。

更有意思的是,中间还撞上了 Harness 的沙箱权限限制,但它自己换了一条路径继续完成任务。

图片展示了DeepSeek Harness在第五关“Harness自我扩展”中真实运行的结果。工具已注册并被Agent可见,通过验证插件真实调用了其execute,成功执行了vite build、dist/被重建等操作。源代码文件清单包括App.tsx等文件,源代码清单文件清单有39个模块。此外,还对动态Plugin内ctx.get('fs').writeText等受限操作进行了说明,如默认受workspace-write沙箱约束,但不影响health-1保持运行等。

通过标准

最终出现一个之前没有的 project_health 能力。

并实际返回项目检查结果。

如果无法实现,也观察它能不能准确解释当前 Harness 的限制。


五关跑完以后,我觉得 DeepSeek Harness 意义已经很明显了。

DeepSeek harness又将带来AI行业的一次巨大变化,

今天五个简单的测试,初步证明了DeepSeek的harness有足够的实力。

DeepSeek Harness 当前仍然处在预览期,而且官方明确提醒未来还会有兼容性变化。

我们期待一下大蓝鲸向大黑鲸鱼的转变,