ark-auto-check

ark-auto-check

DeepSeek Harness（DSH）插件：查询火山方舟 Agent Plan 的 AUTO 当前实际路由到哪个具体模型。

它做什么

在 Agent Plan 里选择 Auto 后，API 响应的 model 字段只回 "auto"，官方不透露真实路由目标。 本插件装好后提供一个技能 auto-router-check：对 AUTO 入口（ark-code-latest）做「1–355 随机数」采样， 用分布指纹与内置的 16 个候选模型基准指纹比对（主信号 cos·e^-JSD + G 检验，辅助推理语言 / 推理长度 / tokenizer 签名，EM + BIC 检测混合路由），给出「路由到哪个模型」的结论与置信度。

采样是自适应的：边采边判，top1/top2 分差够大就提前收工（平均约 210 次调用）， 分不清（近平局 / 混合）时自动采到上限 400 次，不猜。档位 fast / balanced（默认）/ strict 见 --list-profiles。

实测（2026-10-25，balanced 档）：AUTO 在 evolving / pro 近平局下，360 次调用时分差 3.06 → 早停， 对比固定流程 440 次省 80 次（18%），结论仍为 single:doubao-seed-evolving。

在任意 DSH 会话中问「auto 现在路由到哪个模型」，会话就会派出子代理执行探针（约 3–10 分钟、约 210 次短请求， 模糊时最多 400 次），回报结论 / 置信度 / top5 排名 / 实际采样量与早停原因。

范围（Scope）

本插件只用于识别火山方舟 Agent Plan（火山计划）中存在的模型——回答 AUTO 被路由到了计划候选清单 （16 个模型）里的哪一个。

• ✅ 在范围内：AUTO 归属判定；计划内模型之间的自检式比对（--target 抽查）；指纹库覆盖查询。
• ❌ 不在范围内：识别计划外模型（其它厂商 / Coding Plan / 按量平台 / 第三方中转站 / 自建服务）、

判断中转站是否偷换模型、来源鉴定与维权、能力测评或榜单。

探针脚本内置断言：--target 只接受 ark-code-latest 或 16 个计划内模型， baselines.json 含计划外模型时直接拒绝执行（exit 3）。越界请求请直接说明范围限制并拒绝。

安装

dsh plugin add 1w1w11w1/ark-auto-check

或在 DSH 的插件市场 / Skills 界面按仓库地址安装。插件以 dsh.bundle 形式注册技能，装完即生效（重启会话）。 手动方式：把 skills/auto-router-check/ 复制到 ~/.dsh/skills/ 同样可用（Windows：%USERPROFILE%.dsh\skills）。

使用前提

• 本机已安装并登录 arkcli 且持有火山方舟 Agent Plan——探针在运行时从

arkcli profile apikey get 读取凭证；也可用 --api-key 或环境变量 AUTO_PROBE_API_KEY 显式传入。

• Python 3.10+（探针仅用标准库）。

隐私说明

• 仓库内不含任何凭证 / API Key / 本机路径 / 用户信息；凭证只在运行该技能的本机上从 arkcli 临时读取，不回传。
• 探针只向模型发送「请从 1 到 355 之间随机选择一个数字」提示词（附随机 nonce 防缓存），不携带任何会话或用户数据。
• baselines.json 为各候选模型公开行为的统计指纹（分布计数与延迟 / token 统计），无个人信息。

维护

• 判定是「当下时点」结果；官方调整路由后重跑一次即可。
• baselines.json 采集于 2026-10-23（16 模型 × 约 400 次主探针 + 辅助探针）。若结论异常（所有候选得分都低），

可能是指纹库过期，拉取本仓库更新即可。

License

MIT