zeroa234/dsh-comfyui

dsh-comfyui · ComfyUI 驱动器（DeepSeek Harness）

面向 DeepSeek Harness（dsh）的 AI 优先合同制 ComfyUI driver。

模型只看见合同（槽 / LoRA 坑 / can / cannot 能力标签），永远看不见工作流 JSON；人要改接线去真 ComfyUI。
模型只看见合同（槽 / LoRA 坑 / can / cannot 能力标签）——永远看不见工作流 JSON；重新接线在真实 ComfyUI 中进行。

图生图 · 文生图 · 图生视频 · 文生视频：工作流扫描成合同 → 双击预检（节点存在性 + 模型文件）→ 失败如实报错，不假出一张图。
图生图 · 文生图 · 图生视频 · 文生视频：将工作流扫描成合同 → 双重预检（节点存在性 + 模型文件）→ 失败时如实报错，不伪造输出。

特性 · Features

工具注册名统一为 _dsh_external_dsh_comfyui_ 全名（harness 不做名字缩短，模型按注册名调用）。
工具注册名为完整的 _dsh_external_dsh_comfyui_（harness 不会缩短名称；模型调用注册名）。

| 工具 Tool（注册名 Registration name） | 说明 Description |
|---|---|
| _dsh_external_dsh_comfyui_list | 连通状态 + 模板清单（media/mode/can/cannot + 用户写的 user_note）连通状态 + 模板清单（media/mode 以及供模型查看的用户备注） |
| _dsh_external_dsh_comfyui_inspect | 单个模板的槽 / LoRA 坑 / prompt_style / user_note，query 搜模型文件名 单个模板的槽 / LoRA 坑 / prompt 风格 / 用户备注；query 搜索模型文件名 |
| _dsh_external_dsh_comfyui_generate | 按合同填槽提交。遵守 user_note 与 prompt_style（自然语言 vs tag）。图/视频/音频只传本地路径 按合同填槽提交。遵守用户备注和 prompt 风格。媒体输入接受本地路径 |
| _dsh_external_dsh_comfyui_job | 查询 / 等待 / 取消任务；成品只返回磁盘路径 查询 / 等待 / 取消任务；输出为磁盘路径 |
| _dsh_external_dsh_comfyui_import | 扫描 / 导入本地 API Format JSON 为新模板（默认只扫描不落盘）扫描 / 导入本地 API 格式 JSON 为新模板（默认仅预览，不落盘） |
| _dsh_external_dsh_comfyui_lora | LoRA 注册表：list / register / remove 触发词与用法注释（与设置页同一张表）LoRA 注册表：list/register/remove 触发词与用法注释（与设置页同一张表） |

核心设计 · Core design

AI-first 合同制 · Contract-first, AI-blind to graphs

工作流 JSON（ComfyUI API Format，模型不可见）
│ scanGraph()：离线启发式 + 活体官方集合判定
▼
模板合同 templates/.contract.json   ← 模型唯一可见物（槽/LoRA 坑/can/cannot/models）
│ generate()：填槽 → 尺寸对齐 8 → 别名/触发词 → 模型文件校验
│             → 预检（/object_info 逐节点存在性 + 必填输入）→ POST /prompt
▼
成品 outputDir//（图/视频/音频）＋ job 记录（查询/等待/取消）

- 槽 = (node, field) 指针：注入是通用的，合同 JSON 可以手补节点号——自动扫描漏掉的槽有万能逃生门。
槽是 (node, field) 指针，采用通用注入；合同可手动编辑，作为万能逃生门。
- 槽类型封闭、工作流开放：text / number / seed / model / lora / image / video / audio 8 种封闭槽，任意 API 图都能扫成合同。
封闭的槽类型（text/number/seed/model/lora/image/video/audio），开放的工作流集合。
- 双重预检：先验节点 + 必填输入（NODE_MISSING/NODE_SCHEMA_MISMATCH），再验模型文件在服务器上（MODEL_MISSING）；全绿才 POST。失败返回结构化错误码（SLOT_UNKNOWN/PROMPT_REJECTED/MEDIA_MISSING/UI_FORMAT…），不会用文生图冒充视频、不会编造成品。
双重预检：节点存在性 + 必需输入，然后是模型文件存在性；结构化错误码；诚实失败。

工作流适配 · Workflow adaptability

| 类型 Type | 适配度 Adaptability | 证据 Evidence |
|---|---|---|
| 文生图 t2i / 图生图 i2i | ✅ 完全适配（成熟路径） | 随包 3 个 anima 模板，单测覆盖 |
| 文生视频 t2v | ✅ 适配 | 测试 fixture 是真实 MiniMax-H3 图：duration/fps/aspect_ratio/megapixels 槽、音频 VAE、cannot: t2i |
| 图生视频 i2v | ✅ 适配（图里接了 LoadImage 即识别） | 实测探针：LoadImage → WanImageToVideo → VHS_VideoCombine 扫出 mode: i2v + 必填 image 槽 |
| 音频相关 audio | 🟡 部分 | LoadAudio/SaveAudio/VAEDecodeAudio 识别，输出收集含 audio bag |
| 聊天 / LLM 节点混合 | 🟡 能导入能执行，无对话语义 | LLM 节点上游有标量文本时会被选为 prompt 槽；全内部化则诚实警告"edit the contract" |

官方 / 自定义节点判定 · Official vs custom node classification

每个节点的 python_module 标签就是权威来源：nodes / comfy_extras. / comfy_api_nodes. 是官方，custom_nodes. 是自定义（带插件包名）。

The python_module tag on every node is authoritative: nodes / comfy_extras. / comfy_api_nodes. are official; custom_nodes. is custom (pack name included).

- 生成时：预检按 python_module 活体分类，返回 custom_nodes: [{class_type, pack}] —— 官方更新新节点零维护自动跟随。
At generate time, preflight classifies live by python_module — new official nodes in ComfyUI updates are followed automatically.
- 导入时：优先用活体会话分类（警告标注 verified against the live server）；离线时回退到 lib/lib/official-nodes.json（849 个官方节点，由 scripts/update-official-nodes.mjs 从服务器生成，绝不手打）。
At import time, live classification wins (warning marked verified); offline falls back to the generated 849-node official list.

安装 · Installation

仓库即标准 dsh bundle 包（@dsh-external/dsh-comfyui），克隆后直接安装：

The repo is a standard dsh bundle package (@dsh-external/dsh-comfyui) — clone and install:

git clone https://github.com/zeroa234/dsh-comfyui
cd dsh-comfyui
npm install
dsh plugin --profile web add .

安装后重启 harness，新会话的工具列表里就会出现 _dsh_external_dsh_comfyui_ 六个工具（bundle 自带的 cordis.patch.yml 会写入默认 baseUrl/outputDir）。设置页改动需要再重启一次才能刷新客户端打包。

After a harness restart, the six _dsh_external_dsh_comfyui_ tools appear in new sessions; the bundle's own cordis.patch.yml applies the default baseUrl/outputDir. Settings UI changes need another restart to rebuild the client bundle.

配置 · Configuration

| 配置项 Option | 默认 Default | 说明 Description |
|---|---|---|
| baseUrl | http://127.0.0.1:8188（patch 覆盖为局域网地址） | ComfyUI 服务器 |
| templatesDir | 包内 templates/ | 合同 + 工作流 JSON |
| outputDir | E:\agent\output\comfyui | 成品目录（按 prompt_id 分子目录） |

覆盖方式（profile 的 cordis.patch.yml 或预设配置）· Override in the profile's cordis.patch.yml or a preset config:

- id: dsh-comfyui
name: '@dsh-external/dsh-comfyui'
config:
baseUrl: 'http://192.168.0.103:8188'
outputDir: 'E:\agent\output\comfyui'
另有浏览器设置页（设置 → ComfyUI）：改地址、模板/LoRA 注释（写给模型看：底模、自然语言还是 tag、LoRA 特殊用法）、LoRA 触发词（mode=仅模型 不写进提示词，适合 turbo；可从 ComfyUI 文件列表添加/删除）、导入工作流（API Format JSON，默认只扫描预览）。user-settings.json 保存在 templates/ 下（gitignored）。list / inspect 会带上 user_note。

浏览器设置页（设置 → ComfyUI）管理地址、每个模板和每个 LoRA 的模型注释（底模、自然语言还是 tag、LoRA 特殊用法）、LoRA 触发词（model-only 不把词写进提示词，适合 turbo；可从 ComfyUI 文件列表添加/删除），以及工作流导入（默认仅预览），持久化到 gitignored 的 templates/user-settings.json。list / inspect 会带上 user_note。

测试 · Tests

npm test   # node:test（零依赖），覆盖 graph 助手/合同读取/LoRA 触发词与注释/扫描/官方节点分类

tests/templates/ 之外无需任何外部依赖；官方节点分类测试直接读生成的 official-nodes.json，并验证活体 officialClasses 覆盖优先。

构建与注入（开发）· Build & inject (development)

纯 JS 包，源码即产物（无 src/、无构建步骤），克隆即用：

dev_inject_plugin     # 运行时注入（重启会丢）
dev_install_package   # 持久化：写入 profile package.json（link 依赖 + dsh.profile.bundles），重启不丢
dev_reload_package dsh-comfyui   # 改完代码确定性热重载（清缓存 → 重建 fiber，失败回滚旧代）

官方节点清单再生成：node scripts/update-official-nodes.mjs [baseUrl]。
改造工作流时：ComfyUI 里 Enable Dev mode → Save (API Format)，再用 _dsh_external_dsh_comfyui_import 扫一遍。

仓库结构 · Repository layout

dsh-comfyui/
├── lib/                        # 源码即产物（纯 JS）· Plain-JS source (= build output)
│   ├── index.js                # 工具注册 + 设置 API · Tool registration + settings API
│   ├── client.js               # 浏览器设置页（settings.section slot）· Browser settings UI
│   └── lib/
│       ├── engine.js           # 生成管线（预检 / 上传 / 轮询）· Generation pipeline
│       ├── scan.js             # 工作流 → 合同扫描器 · Workflow → contract scanner
│       ├── graph.js            # 纯图助手（填槽/别名/绕过 LoRA）· Pure graph helpers
│       ├── templates.js        # 合同读写 · Contract I/O
│       ├── store.js            # LoRA 触发词 + 模板/LoRA 用户注释 · Trigger words and user notes
│       ├── import-template.js  # 扫描/保存模板 · Template import
│       ├── http.js             # ComfyUI HTTP 客户端（fetch）· HTTP client
│       └── official-nodes.json # 官方节点离线清单（脚本生成）· Offline official-node list (generated)
├── templates/                  # 模板合同 + 工作流 JSON · Template contracts + workflows
│   └── .contract.json + .json
├── tests/                      # node:test 用例（零依赖）· node:test suites
├── scripts/
│   └── update-official-nodes.mjs   # 官方节点清单再生成 · Regenerate official-node list
├── package.json
├── README.md
└── LICENSE

许可证 · License

BSD-3-Clause