dsh-llm-as-a-verifierDSH 插件
将 LLM-as-a-Verifier 统一验证框架移植为 DSH 插件,读取验证模型在 20 级评分字母上的完整 logprob 分布并取期望,提供 verify_compare、verify_select、verify_track 工具
查看原仓库英文描述
LLM-as-a-Verifier for DeepSeek Harness: fine-grained reward, Probabilistic Pivot Tournament best-of-N selection, and per-step progress tracking as agent tools.
基础信息核对
资料已更新项目活跃度
数据覆盖 60% · 有限数据 · 数据截至 2026-09-03
14 次提交 · 最近推送 10 天前
0 个样本 · 暂不计分
0 个样本 · 暂不计分
1 位近 90 天活跃贡献者
未发现GitHub Release
5 Stars · 0 Forks
安装
dsh plugin --profile web add github:TaurenMountain/dsh-llm-as-a-verifier
首次安装 GitHub 来源的包时,可能需要在 profile 的 pnpm-workspace.yaml 的 allowBuilds 中允许该包的构建脚本;也可用 github:TaurenMountain/dsh-llm-as-a-verifier#<commit-sha> 锁定版本。详见官方文档。
还没有 DSH?两步开始 →
第一步:准备 Node.js 环境
DSH 依赖 Node.js(建议 20 LTS 或更新版本)。终端里运行 node -v 能显示版本号即已就绪。
已有 Node.js:直接进入第二步。
没有 Node.js:去 nodejs.org 下载 LTS 安装包(Windows/macOS 双击安装);或用包管理器:
brew install nodewinget install OpenJS.NodeJS.LTS第二步:启动 DSH
无需安装,直接运行:
npx @deepseek-ai/dsh web浏览器打开 http://127.0.0.1:3080,在 Web UI 的插件市场里搜索 dsh-llm-as-a-verifier,或粘贴上面的安装命令。