工程设计
同样 PASS,路径为何不同|用 Jev 逐 Span 评估 Agent Trace
两个 Agent 跑过同一批测试,最后生成的 patch 甚至逐字节相同。只看 PASS 率,它们几乎没有区别。展开 Trace,也就是一次任务中模型请求、工具调用和验证过程的完整记录,一个可能很快找到问题,另一个可能经历多次重复扫描和无效重试。本文介绍一套逐 span 评估 Agent Trace 的方法。Databend 保存并分析海量 Trace,普通代码处理可以直接确定的事实,Jev 判断每一步是否相关、是否带来新进展。判定结果写回同一个湖仓以后,团队可以继续用 SQL 比较模型和 harness 的执行路径。






