dsh-agent-bench

v0.1.1
songrui111 · 更新于 2026-10-26 · MIT

Regression benchmark for DSH agents: replay fixed cases in isolated sandboxes and diff scorecards across model, prompt and DSH versions. DSH Agent 回归基准。

会话与消息dshdsh-plugindeepseek-harnessdeepseek依赖 2 项
认证等级
L1
2 / 4 层有结论
健康分 · S
100
0 条扣分
周下载
241
截至 11-13
依赖漏洞
0
无公告
能力扫描
5 项
2 高关注 · 1 需留意
上线 19 天下载趋势
按天
累计下载1.1k
近 7 天241
单日峰值434
近 7 天环比↓16%
015030045060010/2610/2911/111/411/711/1011/1310/26 · 43410/27 · 3410/28 · 4110/29 · 6510/30 · 3310/31 · 3911/1 · 3711/2 · 3311/3 · 5911/4 · 3911/5 · 4511/6 · 3411/7 · 3211/8 · 3711/9 · 2911/10 · 4611/11 · 5411/12 · 4311/13 · 0

这个包发布于 2026-10-26,上线还不满四周,按周折桶只剩几个点, 所以先按天画。纵轴同样从 0 起;npm 的日下载量滞后 1~2 天结算,最后一天可能偏低。

报告更新于 2026-11-06
四层检测
检测 L1完整口径

四层逐级把关:包结构是否完整、能否与其他插件组合、隔离环境能否装上并启动、抽样运行时是否异常。任一层未通过,不计入等级。

  1. L0
    静态结构与契约

    sha512-Pvk02ydgr+7Zp/6D… 与本地 tarball 复算一致,补丁与入口齐备

    通过
  2. L1
    配置组合与依赖图

    插入模块可解析,目录内 peer 满足,跨包无 entry id 冲突

    通过
  3. L2
    隔离沙箱冒烟

    启动结论:unbooted

    未通过
  4. L3
    运行时健康监控

    记录里没有会话启动的证据,不能据此判为无异常

    未通过

检测等级只回答四件事:包本身结构是否完整可解析(结构完整)、能不能与别的插件组合(可组合)、隔离环境里装不装得上并起得来(可安装)、会话观测里有没有出现意外动作(已观测)。依赖漏洞、仓库存活、下载量都不参与评级,只作为独立信号标注。可信 ≠ 无漏洞,上架 ≠ 推荐。

能力扫描
5 项能力 · 49 处命中

命中次数只说明源码里出现过这类调用,不说明行为好坏。逐条看下面的清单。

可执行外部程序
spawns-processes · 4 处
高关注
以 shell 执行命令
shell-exec · 1 处
高关注
写入文件
writes-files · 9 处
需留意
读取文件
reads-files · 31 处
一般
读取环境变量
reads-env · 4 处
一般
兼容性
可与其它插件组合

安装前需确认四项:依赖哪些包、需要何种运行时、自带多少第三方依赖、是否改动宿主本身。

peer 依赖
2个
全部来自 @deepseek-ai/
运行时要求
>=22.19.0
dsh >=0.2.0-rc.2
第三方依赖
0个
未引入第三方依赖
bundle patch
1个
./cordis.patch.yml
依赖安全公告
无已知公告

按声明范围的下界查 OSV.dev,没有命中已知漏洞。这不等于依赖绝对安全,只说明公开数据库里没有记录。