n
dsh-decision-review
Manifest valid★ 29hasBundlePatch
dsh-decision-review
主模型继续拍板,第二个模型只提供复核意见。
把“独立复核”做成 DeepSeek Harness 里的一个工具,而不是替模型做决定。
简体中文 · English
[!NOTE] 这是一个 DSH bundle,安装后默认
mode: off,不会产生任何调用。要真正启用,需要一个兼容POST /v1/decision的复核服务,并显式配置model与baseUrl。
为什么做这个插件
让同一个模型先产出结论再自我复核,往往只是重复一遍它的理由。独立复核的价值在于“第二意见”:复核方只看到问题、主模型的预选、证据与约束,不参与原始推理,也不掌握工具权限。
主模型必须先形成 primaryChoice,插件才发起复核。复核返回的建议会连同置信度一起回到主模型手里,采纳、保留还是询问用户,仍由主模型决定。
flowchart LR
A[主模型形成 primaryChoice] --> B[__decision_review 工具]
B --> C[POST /v1/decision]
C --> D[choice + confidence]
D --> E{confidence 阈值}
E -->|>= minConfidence| F[ok:可采纳]
E -->|>= abstainBelow| G[not_adoptable:保留但不推荐]
E -->|< abstainBelow| H[abstained:证据不足]
F --> I[主模型决定采纳或保留]
G --> I
H --> I
核心能力
| 能力 | 使用体验 |
|---|---|
| 三种模式 | off 不注册;shadow 只记录不回灌;advisory 返回结构化建议 |
| 不替模型决策 | 复核只给建议与置信度,最终选择仍在主模型 |
| 结构化产出 | 固定返回 status、recommendation.choice、confidence、reasonCode |
| 置信度分层 | 达标可采纳、未达标保留、过低视为弃权 |
| 失败不重试 | 复核失败立即返回原因,主模型按原判断继续 |
| 日志脱敏 | 只记录点位、状态、原因码、模型、HTTP 状态、请求 id、输入指纹与耗时 |
| 权限隔离 | 权限、审批、写操作、网络目标、工具白名单永不交给复核方 |
复核协议
复核端点是结构化决策接口,不是 OpenAI 兼容的聊天接口:
POST {baseUrl}/v1/decision
Authorization: Bearer {DECISION_API_KEY}
请求体只有三个顶层字段:{ model, state, questions }。
| 字段 | 来源 |
|---|---|
state.question | 工具入参 question |
state.primaryChoice | 工具入参 primaryChoice |
state.evidence | 工具入参 evidence |
state.constraints | 工具入参 constraints |
questions.recommendation.criteria | 工具入参 options |
| 返回值 | answers.recommendation.choice 与 confidence |
probabilities 只透传给主模型参考,不参与判定。baseUrl 是网关根地址,插件自己拼接路径;已经以 /v1 或端点路径结尾的地址会在启动时被拒绝。
安装
dsh plugin --profile <name> add dsh-decision-review
dsh plugin --profile <name> add /path/to/dsh-decision-review
dsh plugin --profile <name> add github:ninetyhe-90/dsh-decision-review
配置
| 字段 | 类型 | 默认 | 说明 |
|---|---|---|---|
mode | off | shadow | advisory | off | 运行模式 |
model | string | 无 | 必填,复核模型名,插件不提供默认值 |
baseUrl | string | 空 | 复核服务根地址,不含 /v1 |
apiKeyEnv | string | DECISION_API_KEY | 存放凭据的环境变量名 |
allowedDecisionPoints | string[] | [] | 允许调用复核的决策点名,任意合法命名均可 |
timeoutMs | number | 5000 | 单次复核超时 |
minConfidence | number | 0.75 | 可采纳阈值 |
abstainBelow | number | 0.5 | 弃权阈值,不得高于 minConfidence |
promptSection | boolean | true | 是否注入提示段 |
promptSectionOrder | number | 30 | 提示段顺序 |
systemExtra | string | 空 | 追加到复核请求的领域约束 |
- insert:
- id: decision-review
name: dsh-decision-review
config:
mode: advisory
model: your-decision-model
baseUrl: https://your-gateway
allowedDecisionPoints:
- custom_review_point
失败码
reasonCode | 含义 |
|---|---|
timeout / cancelled | 本地超时,或父请求被取消 |
upstream_timeout | 网关报告上游超时(HTTP 504) |
credential_unavailable | 凭据环境变量缺失 |
authentication_failed | 凭据缺失或被拒绝(HTTP 401) |
model_not_authorized | 凭据无权使用该模型(HTTP 403) |
model_unsupported | 网关不认识该模型名 |
invalid_request | 请求体被拒绝(HTTP 400) |
route_unavailable | HTTP 404,检查 baseUrl 是否为网关根地址 |
rate_limited / quota_exceeded | 上游限流或额度耗尽 |
context_too_large | HTTP 413 |
invalid_response / response_too_large | 响应无法解析或超出上限 |
provider_error | 其它网络或服务端错误 |
安全边界
- 复核方不获得任何工具、文件、网络或审批权限。
- 权限提升、用户确认、写操作、网络目标与工具白名单不进入复核范围。
- 复核结果只是建议,不能绕过主模型的判断与宿主的确认流程。
- 日志不记录请求正文与原始错误,只记录结构化元数据。
兼容性
- Node.js 20.11+
- DeepSeek Harness 0.2.x:需要
ctx.tools、ctx.logger;缺少ctx.systemPrompt时跳过提示段注入 @deepseek-ai/schemastery3.18.x
项目结构
src/decision-core.mjs 配置校验、输入归一化、提示段与失败码
src/decision-model.mjs 工具注册、复核请求与结果映射
test/ 配置、协议与工具行为测试
cordis.patch.yml bundle 层,默认 mode: off
开发与验证
npm install --include=dev
npm test
npm run check
路线图
- 三档模式与置信度分层
- 结构化失败码与日志脱敏
- 可配置决策点白名单
- bundle 安装形式
- npm 发布
- 复核服务的最小参考实现
许可证
MIT
Comments
Loading…