kicer
147f0654c5
feat(fetch): 下载/返回双上限解耦 + offset 回合缓存续读 + SSRF 防护 + HTML 剥壳增强
- 返回窗收紧:max_bytes(下载,1MB)与 max_chars(返回,默认 12000/硬帽 64000)拆分;单次抓取上下文开销从最坏几十万 token 掉到数千
- offset 续读:超窗尾部提示全文长度与本段区间,转换后全文挂 ctx.run.fetchCache(回合级 LRU 3 条),续读纯本地切片不重抓;字节截断如实标注不完整,不承诺无效续读
- SSRF 防护(默认开):主机名解析结果含回环/私有/链路本地即拒,redirect:manual 逐跳复查至多 5 次;fetch.allow_private: true 可放行;DNS 重绑定为标注的残余风险
- htmlToMarkdown 补剥 nav/header/footer/aside/form 整块与 class/id 样板词启发式丢块,<title> 提成首行;字节截断尾 U+FFFD 去噪
- schema 增 offset/max_chars;旧 config.yml 经 deepMerge 自动获得新默认,无需迁移
- 验证:临时功能脚本 22/22(真 HTTP server 打 executeTool),dep-check 通过;smoke 的 held 超时经 stash 对照确认为既有环境问题,与本改动无关
2026-09-29 16:27:02 +08:00
..
2026-09-29 15:56:13 +08:00
2026-09-29 16:11:34 +08:00
2026-09-28 11:25:15 +08:00
2026-09-29 16:27:02 +08:00
2026-09-26 10:13:45 +08:00
2026-09-06 18:47:20 +08:00
2026-09-29 16:27:02 +08:00
2026-09-29 15:32:02 +08:00
2026-09-15 21:27:43 +08:00
2026-09-17 20:12:56 +08:00
2026-09-29 15:32:02 +08:00
2026-09-28 16:27:00 +08:00
2026-09-28 14:19:47 +08:00
2026-09-19 19:26:51 +08:00
2026-09-29 15:56:13 +08:00
2026-09-17 20:12:56 +08:00
2026-09-06 08:21:41 +08:00
2026-09-29 12:37:30 +08:00
2026-09-29 11:27:19 +08:00
2026-09-27 21:55:40 +08:00
2026-09-29 12:20:35 +08:00
2026-09-01 23:05:20 +08:00
2026-09-29 16:23:47 +08:00