同一颗AI大脑,配不同的工程外设,跑出来的效果和烧掉的钱可能差出近7倍——这不是玄学,而是最近一场针对8款主流Agent Harness的横向实测得出的结论。
测试里跑赢全场的,是一款名为Pi的开源编程Agent:它与DeepSeek组队时,缓存命中率高达99.93%,单次成功任务平均成本仅0.028美元,GitHub上已收获8.6万颗Star。
先解释一个概念:大模型本身更像是负责思考的大脑,想让它真正走进代码仓库干活,还得给它配上眼睛、手脚和一整套工作流程。这套围绕模型搭建的工程系统,在AI编程圈被称为Harness——它负责读写文件、调用终端、运行测试等具体操作。
同一个模型,换一套Harness,实际表现和调用成本都可能出现巨大差异。这也是为什么「模型很强但工具链不对」往往成为落地效果打折的隐形原因。
Pi由开发者Mario Zechner创建,定位是开源编程Agent。凭借与DeepSeek的出色配合,它在GitHub上的Star数已逼近8.6万,迅速成为社区热议的明星项目。
Pi的设计思路相当「直给」:核心只保留4件工具——读取文件、写入文件、修改文件、执行命令。其他能力如计划模式、子Agent、MCP协议、Git检查点、权限控制等,全部通过扩展(Extensions)和技能(Skills)按需安装。
打个比方:它先给你交付一间水电齐全的毛坯房,最终装成什么样,全看用户自己的折腾能力。这种克制,正是它后续能保持高缓存命中的关键前提。
2025年4月,Pi针对DeepSeek做了深度适配:接入原生Provider支持,修复了V4会话回放时的400报错,按DeepSeek接口要求保留reasoning_content,并把内部推理强度映射到DeepSeek支持的思考级别。
原因是DeepSeek的推理与编程能力很强,但在工具调用、上下文管理和思考内容回放上有自己的接口规则。直接把围绕OpenAI或Claude设计的通用Harness硬套上去,容易出现工具格式不兼容、推理内容回放报错、缓存失效等问题。
为什么缓存如此关键?编程Agent每执行一步,都要重新发送系统提示词、工具定义、历史对话和代码——任务拖得越久,请求就越长,而其中大部分内容模型其实已经看过。
自动前缀缓存正是针对这一场景:当系统提示词、工具定义、历史对话保持一致时,已计算过的请求开头可以直接复用。命中率越高,需要重新计算的Token就越少,成本自然越低。
缓存也有脆弱之处:提示词里多一个时间戳、工具顺序调换一下,都可能让缓存整体失效、推倒重算。Pi的优势恰恰在于默认工具少、会话内容持续向后追加、很少回头改动前面的内容,缓存不容易失效。
开发者Evan Kim的实测数据更有说服力:缓存不命中率低至0.03%(即命中率约99.97%)。按此换算,处理10亿Token,有缓存时费用约19元人民币,无缓存时则要900多元——成本相差近50倍。
这场评测来自Composio团队,测试对象是8款主流Agent Harness搭配DeepSeek V4 Flash。结果显示,Pi的单次成功任务平均成本约0.028美元,在8款工具中最低;与它同场竞技的还有开源圈熟知的Hermes Agent、OpenCode、Codex等;而最贵的Claude Code约0.195美元,接近Pi的7倍。
需要说明的是,这并不代表Claude Code能力不行——它本就是围绕Claude模型打造的完整工程体系,换成DeepSeek后,原本针对Claude生态优化的流程没能吃到低成本、高缓存效率的红利。模型还是那个DeepSeek,Pi只是让它少读了很多遍已经读过的内容。
DeepSeek官方同样在加速布局。2025年5月,资深研究员陈德里确认公司内部已组建Agent Harness团队,目标是从零打造DeepSeek Code Harness,直接对标Claude Code;7月底,ACM金牌得主、Harness团队负责人崔添翼公开招募开发者,官网也持续挂出相关岗位。
官方给出的战略路径很清晰:先用V4补强底层推理与编程能力,再做官方Harness接入终端、代码仓库与工具链,最后通过上下文管理与测试反馈,把真实用户的失败案例送回模型团队持续迭代。
接下来将是官方与第三方并行的格局:DeepSeek官方Harness主打开箱即用、与自家模型深度协同;而Pi的差异化在于把工作台留给用户自行改造,支持Claude、OpenAI、Gemini、Kimi、MiniMax多Provider自由切换——今天用DeepSeek省Token,明天换其他模型处理特殊任务。
正如社区点评的那样:DeepSeek自己给自家模型做的Harness,总不能还没有第三方懂得怎么省Token吧。
🤖 Hermix AI数字员工——基于开源Agent生态打造的企业级智能员工平台,支持私有化部署、多模型接入,让AI真正走进你的业务流程。
🔗 免费试用:https://hermix.cn
📱 扫码添加企业微信,领取AI数字员工体验方案