安装
在 DeepSeek Harness 里通过 dsh-market 安装
dsh plugin --profile web add dshmarket
或使用命令行
dsh plugin --profile web add dsh-tool-vision
装任何插件都等于在你的机器上跑第三方代码,权限和你本人一样大——能读你的文件、用你的凭据、访问网络。请先审阅源码,并尽量锁定 commit(github:owner/repo#sha)。
README
配置入口(DSH 0.2.0-rc.2 起)
在首页侧边栏打开 插件 → 已安装 → dsh-tool-vision,直接在插件详情页配置并保存。配置页注册到官方的 plugins.bundle.config 接口;全局设置页不再重复显示配置入口。Web 与桌面版使用相同界面,本版要求 DSH 0.2.0-rc.2 或更新的 0.2.x 版本。现有配置无需迁移。
GitHub: Scorp1o117/dsh-tool-vision · npm: dsh-tool-vision · English
属于 DeepSeek Harness Enhancement Suite —— Vision · Soul/Persona · 长期记忆 · 插件市场。
给 DeepSeek Harness 外接视觉模型的插件。
DSH 0.1.1 已为 DeepSeek 视觉模型目录加入原生图片输入。本插件继续提供独立的 OpenAI 兼容视觉端点、像素级图片工具、截图,以及文本模型图片桥。Harness 的每次模型请求都严格从会话日志推导(llm/stream 请求必须与持久化推导一致,否则 agent-loop invariant 会报 log-reconstruction desync),因此图片桥仍在可持久重建的路径内完成转换:
inspect_image工具 —— 把图片(本地文件或 http(s) URL)发给任意支持image_url内容块的 OpenAI 兼容/chat/completions端点,把视觉模型的文字回答带回对话。- 图片桥(v0.2.1) —— 粘贴的图片在进入持久化日志之前就被转换成
inspect_image指引文本,拦截点是agent/pre-stepwaterfall(这是 harness 唯一允许插件替换"进入某一步的消息"的缝;替换后的消息会成为持久化的user/message日志,所以请求重建 invariant 天然满足)。旧版本已经写进日志的图片消息,会在该会话下一次 pre-step 时用 surfacereplace惰性修复。只有multimodalModels白名单内的模型直收图片块;不参考模型的inputModalities声明——因为很多配置为了通过 prompt 准入检查,会给纯文本模型声明input: [text, image](那只是声明,不代表上游真的能吃image_url)。
- 除 dsh SDK 外零依赖 —— 兼容任意端点:OpenAI GPT-4o、Qwen-VL(DashScope)、GLM-4V(智谱)、Moonshot、Gemini 兼容端点、本地 Ollama 等。
- 注册在全局工具层:进程内所有 Agent 都能调用
inspect_image。 - Web UI 设置栏(v0.3.0):插件 → dsh-tool-vision 编辑
tool-vision配置(API 地址、只写密钥、模型、桥接选项),写入当前 Profile patch,改动即时生效无需重启。插件按包名挂载(name: 'dsh-tool-vision')以便 web 端发现客户端 bundle。
兼容性(v0.9.7)
已在 DSH 0.1.7-rc.2(Web)与 0.2.0-rc.2(桌面端运行时)的一次性 Profile 验证。桌面端使用独立的 desktop Profile;其他预发布版本暂未验证。
桌面端安装
在桌面端的“插件”页面安装,或使用桌面端“应用 → 管理 dsh 命令”注册的命令:
dsh plugin --profile desktop add dsh-tool-vision@0.9.7
重启桌面端以加载客户端插件。配置位于 $DSH_HOME/profiles/desktop。
v0.9.4:修复 Windows 图片桥导出文件名
- 导出文件名改为从完整附件 ID 生成稳定哈希;
sha256:...等 ID 不再写入 NTFS 备用数据流,避免出现可见主文件为 0 字节的情况。 - 写入前确保导出目录存在;进程内缓存按
bridgeExportDir区分。 - 已通过 DSH
0.1.5-rc.3一次性 Profile 的安装、Web 启动、首页与客户端 Bundle HTTP 检查,以及卸载验证。
安装
在 profile patch($DSH_HOME/profiles/<name>/cordis.patch.yml)里挂载:
- insert:
- id: tool-vision
name: 'dsh-tool-vision' # 前置:在 profile 里 pnpm add dsh-tool-vision
config:
baseURL: 'https://api.openai.com/v1'
apiKeyEnv: 'VISION_API_KEY'
model: 'gpt-4o-mini'
不装 npm 包、直接加载本地路径:
- id: tool-vision
name: './plugins/dsh-tool-vision/index.js'
配置
| 字段 | 默认值 | 含义 |
|---|---|---|
enabled |
true |
总开关(v0.8.0)。关闭后插件不注册任何东西:inspect_image、14 个 vision_* 工具、图片桥、预览路由、图片能力声明统统下线;设置栏本身保留,所以随时能再打开。热生效,无需重启 dsh |
baseURL |
https://api.openai.com/v1 |
OpenAI 兼容 API 基地址 |
apiKey |
'' |
API 密钥(优先于环境变量) |
apiKeyEnv |
VISION_API_KEY |
存放密钥的环境变量名 |
model |
gpt-4o-mini |
视觉模型 id |
maxTokens |
1024 |
视觉调用最大输出 token |
timeoutMs |
60000 |
单次请求超时 |
maxImageBytes |
10MB |
本地图片大小上限 |
description |
默认描述 | 工具描述(模型可见) |
bridgeTextOnly |
true |
把粘贴图片转成文本指引(发给看不懂图片的模型时) |
bridgeExportDir |
临时目录 | 桥接图片导出目录(os.tmpdir()/dsh-vision-bridge);文件名使用附件 ID 的安全哈希 |
multimodalModels |
[] |
模型名单(逗号分隔)。每项按「完整 id / 末段裸 id / provider/id」三种写法匹配,大小写不敏感,支持 * ? 通配(如 *vl*、deepseek/*)。含义由下面的模式决定 |
multimodalListMode |
whitelist |
名单模式(v0.9.0):whitelist 名单内模型直收图片块(旧行为);blacklist 名单内模型强制走桥接(用来纠正"声明支持图片但实际不支持"的模型);off 忽略名单。未知值一律回退 whitelist |
autoDetectMultimodal |
true |
自动识别(v0.9.0):按当前路由自己声明的 inputModalities 判定,再与名单合成(白名单取并集、黑名单取差集)。默认开启=识别到纯文本就交给桥接、识别到多模态就等同白名单成员直发图片;声明永远读"包装前"的真值,不会被 bridgeAutoImage 的假声明污染。设为 false 可退回"只认名单"的纯手工行为 |
probeResults |
{} |
实测结果(v0.9.0):"provider/model" → "yes"/"no",由 vision_probe_model 工具写入,不要手改。实测优先级高于声明(真实请求 > 自称),但低于 multimodalModels(人的明确意图有最终话语权) |
bridgePreview |
true |
桥接图片内联预览:用户气泡内显示缩略图,点击放大 |
bridgePreviewScanIntervalMs |
2000 |
预览兜底扫描间隔(毫秒);0 关闭兜底 |
bridgePreviewHideHint |
true |
图片加载成功后隐藏桥接提示文本(失败时保留,安全降级) |
bridgeAutoImage |
true |
桥接开启时向宿主准入检查报告所有模型都支持图片输入,纯文本模型也能直接粘贴图片,无需手动改 provider 配置 |
sendSessionHeader |
true |
给视觉请求发送稳定的会话标识头。OpenCode Go 等网关要求每请求带 x-opencode-session(一个对话一个稳定 ID),缺失的请求在 2026-09-06 起可能报错 |
sessionHeaderName |
x-opencode-session |
承载会话 ID 的头名 |
sessionId |
'' |
固定会话 ID(后台/无 dsh 会话调用时用);留空则自动:优先取当前 dsh 会话 ID,否则用进程级稳定随机 ID |
图片桥配置
- (一般不需要)只有关闭
bridgeAutoImage时才需要手动给模型声明图片输入(pi-ai 风格),让 harness 放行图片消息:llm-pi-ai: providers: your-provider: models: - id: deepseek-v4-flash input: [text, image] - 在插件配置里列出真正多模态的模型,让它们直收图片块(名单模式见下一节):
- id: tool-vision name: 'dsh-tool-vision' config: multimodalListMode: whitelist # 默认,名单内直发图片 multimodalModels: ['mimo-v2.5', 'grok-4.5']
之后在文本模型下贴图,转录里会留下一条指引:
[User sent an image, exported to: <path>. Inspect it with the inspect_image tool...]
(该消息不再以像素图形式渲染),Agent 会调用视觉端点查看并把结果带回对话。
为什么不用
llm/stream?harness 会冻结每个请求,且 agent-loop invariant 会拒绝任何与会话日志推导不一致的请求;这个 cordis 版本的 waterfallnext()也无法替换请求参数。agent/pre-step才是受支持的缝:它的决策消息会成为持久化日志,invariant 天然成立。
密钥解析顺序:config.apiKey → process.env[apiKeyEnv] → process.env.OPENAI_API_KEY。
桥接图片预览(v0.4.0)
纯文本模型下,被桥接的图片在对话里只显示一段 [User sent an image...] 文本指引。开启 bridgePreview(默认开)后,浏览器端会在展示层把指引渲染成气泡内缩略图:
- 缩略图 + 灯箱:点击缩略图全屏放大,点击任意处或按
Esc关闭; - 即时 + 兜底:新消息由 MutationObserver 即时处理,历史消息由周期兜底扫描补齐(间隔见
bridgePreviewScanIntervalMs); - 隐藏提示文本(P2):
bridgePreviewHideHint开启时,图片加载成功后桥接文本自动隐藏,气泡只留图片;加载失败则保留文本(安全降级,绝不出现"既无图又无字"); - 识别机制:桥接文本带不可见前缀标记(
\u200b[bridge]),客户端据此精确识别桥接块——用户正常发言中出现"exported to:"字样不会被误伤; - 纯展示层红线:不修改持久化消息、不修改转录、不修改模型侧文本、不碰
inspect_image调用链。
预览图片由同源回环路由 /plugins/dsh-tool-vision/image 提供,只读桥接导出目录、仅本机 Host、仅图片扩展名、单文件 ≤ 20MB、防目录穿越。
工具:inspect_image
| 参数 | 必填 | 含义 |
|---|---|---|
path |
✅ | 图片路径(绝对路径,或相对当前工作区)或 http(s) URL |
question |
– | 可选的具体问题 |
detail |
– | auto / low / high 分辨率提示 |
示例端点(baseURL):
- OpenAI:
https://api.openai.com/v1——gpt-4o、gpt-4o-mini - 阿里云 DashScope(Qwen-VL):
https://dashscope.aliyuncs.com/compatible-mode/v1——qwen-vl-plus、qwen-vl-max - 智谱(GLM-4V):
https://open.bigmodel.cn/api/paas/v4——glm-4v-flash(免费档)、glm-4v-plus - Moonshot(Kimi):
https://api.moonshot.cn/v1——moonshot-v1-8k-vision-preview - Ollama 本地:
http://localhost:11434/v1——llama3.2-vision(无需密钥)
像素级视觉工具(v0.6.0,移植自 dsh-vision-router)
14 个 vision_* 工具由同一个 inspect_image 配置的端点驱动
(baseURL/apiKey/model)——无 provider 链、无本地模型、零新增配置:
| 工具 | 用途 |
|---|---|
vision_describe |
看图问答 / 多图对比(可选结构化 JSON) |
vision_ground |
定位目标,返回原图像素坐标框 |
vision_detect |
枚举元素(按钮/输入框/图标…),带编号框 |
vision_crop |
按像素区域裁剪出 PNG 产物 |
vision_pixel_diff |
逐像素对比:差异比例、最差区域、热图、报告 |
vision_colors |
主色量化,还原 UI 调色板 |
vision_ocr |
逐字转写文字(只读字,不做场景识别) |
vision_long_screenshot_ocr |
长截图分块转写为 Markdown |
vision_trace |
potrace 矢量化输出彩色 SVG(worker 线程,安全) |
vision_extract_foreground |
纯色背景抠图 → 透明 PNG |
vision_html_screenshot |
本地 HTML 无头渲染截图(禁网) |
vision_screenshot |
桌面截屏(隐私门控:需在设置中开启 desktopScreenshot;Win: PowerShell / macOS: screencapture / Linux: import/scrot) |
vision_present |
通过宿主附件库把生成的图片正式展示给用户 |
vision_materialize |
把附件/本地图片落盘为工作区真实路径 |
质量与安全细节:
- 内容哈希缓存按 端点+模型+图片+问题 取键(切模型不吃旧答案,失败结果 不入缓存);
- 统一 4MP 降采样后再调用模型;超大输入 stat 预检直接拒绝(文件与 附件路径统一 20MB 上限);
- 限流/5xx 自动重试(感知 Retry-After 退避);端点内容安全拒绝明确
返回
VISION_CONTENT_FILTERED,不再误报后端不可用; - 长截图 OCR 边界:120s 总预算、40 块上限、取消检查、首块失败即停;
- 路径 containment(相对输入禁止逃逸工作区);产物写入
<工作区>/.dsh-tool-vision/。
依赖 sharp / potrace / puppeteer-core(声明为可选依赖:平台安装失败
不会阻断插件安装;缺失时懒加载降级并给出安装提示,不影响其他工具)。
vision_screenshot 属于隐私敏感能力,默认不注册——在 tool-vision 设置中
开启 desktopScreenshot: true 后才会注册桌面截屏工具。
v0.9.0:模型名单模式与自动识别
桥接要回答一个问题:当前这个模型能不能直接看图片? v0.9.0 把它拆成两个相互独立的输入。
base = autoDetectMultimodal ? (路由声明含 image) : 空集
off → direct = base 名单不参与
whitelist → direct = base ∪ 名单 名单只做"加"
blacklist → direct = base \ 名单 名单只做"减"
命中名单时以名单为准:名单是用户明确的意图,优先级高于模型自己的声明,所以永远能纠正误判。
黑名单绝不会退化成"未列出的一律直发":黑名单的基准是自动识别集;没开自动识别时基准是空集,未列出的模型照样走桥接。这是刻意设计的——否则一次误配就能把图片硬塞给纯文本端点。
匹配规则:mimo-v2.5、xiaomi/mimo-v2.5、commandcode/xiaomi/mimo-v2.5 指向同一个路由;* / ? 为通配符;大小写不敏感。v0.8.1 只做字符串全等,README 自己举的 mimo-v2.5 例子在 xiaomi/mimo-v2.5 这类路由上其实静默无效,v0.9.0 修好了(只会多放行,不会收回任何旧配置已经放行的模型)。
面板(插件 → dsh-tool-vision):
- 名单字段下面是一份可直接勾选的模型清单:候选来自 dsh 已配置的模型(
llm.listProviders()+llm.listModels()),按 provider 分组,标注哪些声明支持图片;勾选加入、取消勾选移出,上方输入框仍可手打通配符(两者共用同一份草稿,改完按「保存」生效,未保存时清单头部会标"未保存"); - 顶部常驻当前路由判定:
provider / model、直发还是桥接、依据是什么(名单命中 / 自动识别 / 默认)。
为什么不只用
<datalist>:原生 datalist 必须聚焦输入框并敲字才会弹出,v0.9.0 第一版因此看起来像"面板没反应"。现在清单常驻可见,datalist 只作打字辅助。取消勾选移除的是命中的那条记录本身(名单里写
mimo-v2.5命中了xiaomi/mimo-v2.5,取消勾选就移除mimo-v2.5,不会凭空虚增一个完整 id)。"哪条命中了"由服务端用与桥接同一套匹配器算出(payload 的matchedEntries),客户端不复制规则,所以面板显示的状态永远不会和实际判定打架。
判定依据的读取路径(这是本版最容易做错的地方):autoDetectMultimodal 必须读 resolveModelInfo 被包装之前的真值,否则 bridgeAutoImage 给所有模型贴上的"支持图片"就成了自证。代码里由 unwrappedResolveModelInfo() 保证,并有专门的回归测试。
候选项由插件自己的回环路由提供:GET /plugins/dsh-tool-vision/models(仅本机 Host、只读、no-store),只返回 provider/model id 与声明能力,不含任何密钥或端点地址。它挂在插件主 fiber 而非总开关的子 fiber 上,所以插件关闭时面板依然可用。
⚠️
inputModalities是声明,不是保证——profile 里常见"为了过准入检查而写input: [text, image]"的纯文本模型。上游dsh-llm-pi-ai自己也把"未声明"一律当作纯文本,理由写在源码注释里:两种误判的代价不对等——少声明会在贴图前就拒绝并点名模型,多声明则会放行一张"上游中途拒收、而消息已经落盘"的图片。所以自动识别是默认开启的,同时带三层兜底:① 某个路由首次因"仅凭自己的声明"被放行时,日志会打一条明确提示并点名怎么改;② 面板顶部常驻当前判定与依据;③ 把该模型写进
multimodalModels并切到blacklist模式即可强制回到桥接。
测试
npm test # 服务端单测(不需要额外依赖)
npm run test:render # 面板渲染测试(需要 devDependencies)
npm run test:render 在 jsdom 里加载真实客户端 bundle、走真实注册路径(apply → slots.register → 组件),数据由真实的服务端路由处理器产出,最后断言真实 DOM 与真实的设置写入。
它单独成命令、不并入 npm test:它需要 react / react-dom / jsdom,而一个"依赖缺失就静默跳过"的 DOM 测试只会带来虚假的安全感。需要时先 npm i -D react@18 react-dom@18 jsdom。
它存在的理由很具体:v0.9.0 第一版把模型清单只渲染进原生 <datalist> —— 服务端单测全绿,面板却看起来完全没反应。这类 bug 在 DOM 之下根本抓不到。
实测探测:vision_probe_model(v0.9.0)
前面所有判定都建立在"模型说自己能不能看图"之上。这个工具改为真的发一张图过去试,是插件里唯一的地面真相。
base = autoDetect ? 路由声明含 image : ∅
探测结果(若有)覆盖 base 实测 > 自称
名单命中(若有)覆盖一切 人的意图 > 实测
为什么一次请求不够(都是实测踩出来的):
- 会瞎猜:模型可能对橙色方块回答"blue"。所以探测跑两个不同颜色,两个都答对才算通过;
- 推理模型会返回空
content:思考预算不够时max_tokens全被烧光。默认给 2048,并回退读reasoning_content; - 必须要有对照组:先发一条纯文本请求确认"这条路本身是通的",否则一个 401/超时会被误读成"它不能看图"——那会把一条好端端的多模态路由永久推回桥接;
- 端点不报错 ≠ 能看图。真实网关实测:
meituan/LongCat-2.0:free收到图片请求返回 200,但回答是"I can't see any image."。只有"端点主动拒绝图片部分"才是确定性的负面信号。
结论分三档:yes(对照组通过 + 两色全对)、no(端点拒绝图片,或答了但没读图)、unknown(网络/鉴权/协议问题——绝不当作能力结论)。
它怎么拿到主模型的端点与凭据(不新增任何配置):llm.listConfigurableProviders() 给出 provider 的 settings 命名空间与路径 → settings.get(ns) 读出 baseURL/apiKeyEnv/api → credentials.resolve(apiKeyEnv) 取出密钥(.value),与 dsh-llm-pi-ai 真实调用同一条路。只读,且端点与密钥绝不出现在探测结果里。
联动:探测结果写入 probeResults 并立即参与桥接判定——yes 直接放行图片、no 强制回到桥接,且与名单模式无关。(这比"自动往名单里写一笔"更正确:名单在 blacklist 模式下含义是反的,自动写入会得到完全相反的效果。)面板清单里每个模型带徽章:
已实测可看图/已实测不可看图(蓝 / 红)——实测优先展示;- 没探测过的才回退显示声明的
声明支持图片; - 顶部"依据"栏显示
实测(真实发图验证通过/未通过)。
未知协议的路由(如
openai-responses)会直接返回unknown并说明原因,而不是用chat/completions去猜一个自信的错误答案。
v0.9.3:适配器快照模型准入(pi-ai 门禁放行)
问题。v0.9.2 的 installDispatchImageAdmission 成功满足了 DSH 核心层 LlmService.generate 的模态检查,将图片放行给底层适配器。但在以 dsh-llm-pi-ai 作为适配器时,其内部在 streamWithSnapshot 中执行了第二道门禁校验:
const model = this.modelOf(snapshot, options.provider, options.model);
if (containsImage && !model.input.includes("image"))
throw new LlmError(`pi-ai model "${model.id}" does not support image input`, "UNSUPPORTED_CONTENT");
this.modelOf 直接读取适配器自身维护的 snapshot.models 目录,若用户未在 settings.yaml 中显式声明 input: [text, image],此处默认只有 ["text"]。导致未声明的模型在放行图片后,在流式发起前被 pi-ai 适配器抛出 UNSUPPORTED_CONTENT,且由于该图片已被写进会话历史,后续所有轮次(哪怕发纯文本)都会彻底报错锁死。
修复。在判定为直通路由(direct: true)时,installDispatchImageAdmission 增加了双重深度注入:
- 包装
adapter.modelOf(若存在),使其对直通路由返回携带"image"模态的模型对象; - 动态向当前快照模型(
snapshot.models.getModel(route, model).input)追加"image"模态; dispose时完整还原adapter.modelOf并清理被追加的模态数组。
v0.9.2:准入不等于派发
问题。插件收集的每一个能力信号 —— probeResults、multimodalModels、
autoDetectMultimodal —— 都只决定桥接要不要拦截图片,没有一个决定模型收不收得到它。
LlmService.generate 的能力来源是适配器,不是插件:
const adapterCall = await adapter.prepareCall(provider, model, signal);
modelInfo = this.normalizeModelInfo(registration, model, adapterCall.model);
if (modelInfo.inputModalities !== undefined
&& !modelInfo.inputModalities.includes("image")
&& projectedMessages.some((message) => contentHasImage(message.content)))
projectedMessages = projectImagesForTextModel(projectedMessages);
projectImagesForTextModel 会在调用适配器之前把每个图像块改写成
[image omitted because this model accepts text only; attachment sha256:…]。
于是在一条插件已实测为「能读图」的路由上 —— 桥接因此让开放行 —— 图片依然被销毁,
而销毁它的那个判断只读适配器的声明,不读任何别的东西。resolveModelInfo 那层 wrap
(bridgeAutoImage)是准入:它决定谁可以「提交」图片,从不改变适配器实际流出的内容。
插件里没有任何东西够到真正做决定的那一层。
症状就是:一条探测结果为 yes、也列在 multimodalModels 里的路由,依然回
[image omitted …]。
修复。installDispatchImageAdmission 包装 llm.registration —— 也就是核心自己
调用的那个访问器 —— 于是每个适配器(包括安装之后才注册的)都会经由桥接所用的同一个
routeDirectDecision 来回答 prepareCall。一份优先级规则、两条缝,两者永不可能对同一
条路由给出不同答案。判定为「走桥接」时行为不变:桥接早已把图片变成 inspect_image
提示,核心的投影仍然是任何漏到派发层的图片的正确兜底。
三条性质值得写下来,因为每一条都有测试:
- 失败即保守。判定无法作出时(配置抛错)保持调用原样,而不是把像素发给一条可能拒绝它的路由。
- 可逆。dispose 会还原它改过的每个适配器以及访问器本身;dispose 后再安装会重新包装。
- 后注册的 provider 也算。包装挂在访问器上而不是适配器快照上,所以安装之后注册的 provider 同样覆盖。
routeDirectDecision 现在是这条优先级规则的唯一实现,桥接与派发共用 —— 两份实现必然
漂移,而这份有三个输入。
v0.8.0:总开关,以及保存修复
总开关。 enabled 字段加设置栏顶部的一键按钮(一键关闭 / 重新启用)。
注册本身就是绑定在「发起注册的 cordis fiber」上的副作用,所以插件把所有工具、
图片桥、预览路由和图片能力声明都放进一个子 fiber:关掉开关就是销毁这个子
fiber,15 个工具一并从模型侧消失。设置栏留在父 fiber 上,因此关掉之后还能再打开。
无需重启 dsh。
保存修复。 此前表单把 18 个字段作为并行 scope.set()/unset() 提交。每个
写入各自携带一个 revision 栅栏,而栅栏落后于宿主文档的写入会被 settings/conflict
拒绝——且被拒绝的写入仍然 resolve(scope 的契约是「完成写入与恢复读取后结算」,
不是「被拒就抛错」)。于是设置栏显示「已保存」,而编辑内容静默回退,看起来就是
「完全存不了」。
现在改为一次原子 mutate(),整批修改共用一个栅栏和一次持久化决策;写入结算后
再回读命名空间section做校验,只有确认生效才报「已保存」,否则弹出「写入未生效」并
重新载入表单。没有 mutate() 的旧宿主回退为串行写入(每个等前一个完成,revision
链条依然正确),绝不并行。
另外删掉了 3 处 if (typeof scope.load === "function") scope.load():SettingsScope 接口
从来没有 load()(完整 seam 只有 getSnapshot / subscribe / mutate / set / unset,读走的是
共享 describe 镜像,由宿主 settings/document-updated 驱动刷新)。这些守卫是照臆测 API 写的
死代码,读起来像"已经刷新过了",反而掩盖了缺失的写入校验。
限制
- 从
0.6.3起最低支持 DSH0.1.0-rc.7,已针对0.1.0-rc.7、0.1.0-rc.8和0.1.1-rc.1测试。仍使用 DSH0.1.0-rc.6的用户请锁定dsh-tool-vision@0.6.1;这是最后一个包含旧 settings 白名单兼容补丁的版本。 - 被桥接的图片以文本指引进入对话(转录而非像素)——文本模型无法做像素级上下文推理;视觉模型的描述通过
inspect_image回传。 - 桥接是单向门:文本模型下贴的图会在
agent/pre-step被写进持久化日志,之后切到多模态模型也不会还原成图片块(反方向——多模态切到文本模型——会由repairLoggedImages自动补上桥接)。 - 图片以 base64 传输;注意隐私与大小限制。
- 独立于 dsh-llm 的路由/重试体系;失败会向 Agent 返回明确错误。
License
MIT —— 桥接预览与整合:xing666173。像素级视觉工具移植自 dsh-vision-router(© ysr666,MIT), 在此致谢。
评论
评论存放在 GitHub Discussions。用 GitHub 账号登录后可发表评论或点表情。