// agent-executor:命令执行服务(独立容器,供 agent-core 调用)。单文件零依赖,仅用 Node 内置 http,默认端口 9000。 // // 接口: // GET /health → {ok, running:[{id,pid,cwd,started_at}]} // POST /exec body {command, cwd?, timeout_ms?, max_output_chars?, env?} // 响应 SSE(text/event-stream),每条 data 为一个 JSON: // {"type":"start","id","pid","cwd"} 进程已启动 // {"type":"out","chunk"} stdout 增量(实时分块下发) // {"type":"err","chunk"} stderr 增量 // {"type":"exit","code","killed_by","stdout_chars","stderr_chars","truncated"} 结束汇总 // 期间每 15s 发 ": ping" 注释行保活。 // DELETE /exec/:id → {ok:true} 杀整个进程组(core 侧取消/超时用) // // 安全约束: // - 设置 EXECUTOR_TOKEN 后,除 /health 外必须带 Authorization: Bearer (compose 内网互访,token 可选); // - cwd 必须落在 EXECUTOR_ROOTS(逗号分隔白名单,默认 /workspace)内,先解析再 realpath 校验,防穿越; // - cwd 不得是任务根(EXECUTOR_CWD)本身:它是全部会话目录的父目录,直接在其下执行会暴露所有会话, // 隔离 wrapper 在此层也无从生效;缺省 cwd 即落到任务根、同样被拒,等效 cwd 必填; // - timeout_ms 夹在 [1s, EXECUTOR_MAX_TIMEOUT_MS](默认 30 分钟); // - stdout/stderr 各自按 max_output_chars 截断(默认 EXECUTOR_MAX_OUTPUT_CHARS=200000),超限后丢弃剩余输出,exit 事件带 truncated 标记。 // // per-task 隔离:每条命令默认在新的 mount + pid 命名空间里跑。启动 wrapper 把 EXECUTOR_CWD(任务根,/workspace/tasks) // 覆盖为 tmpfs,只把当前会话的子目录 bind 回原路径上——结果:AI 命令能读写自己的项目,看不到别人的 task 目录。 // 同时 unshare --pid + 重挂 /proc:否则 /proc 仍是宿主视图,/proc/1(executor 主进程)的 ns/mnt 符号链接是原始 mount ns // 的句柄,AI 用 nsenter --mount=/proc/1/ns/mnt 即可逃逸回未隔离视图(已实测复现);重挂后 /proc/1 即命令自身。 // 新 proc 可写会顶掉 docker 的防护,wrapper 逐项还原:/proc/sys 只读 bind(防 core_pattern 类宿主逃逸)、 // /dev/null 遮蔽 kcore/keys(docker maskPaths)与 sysrq-trigger(可写 proc 新暴露,echo b 可重启宿主机)。 // wrapper 还把 server.js 所在目录(镜像 WORKDIR,容器内 /app)用 tmpfs 盖掉,AI 读不到 executor 源码; // 且下发命令的 env 剥掉 EXECUTOR_TOKEN——否则命令里 env 一 dump 就拿 token 回环 POST /exec 以任意会话目录起命令,绕过隔离。 // 副作用红利:pid ns 内 ps 只见自家进程树;double-fork 脱管的守护进程随命令退出被内核连带清理。 // 任务根以外的路径(/workspace/skills、/tmp、/usr、依赖包等)不受影响。mount 命名空间随进程退出自动销毁。 // 需 CAP_SYS_ADMIN,且 AppArmor 不能拦 mount(Docker 默认 docker-default profile 会拦):compose 里 agent-executor 配 cap_add SYS_ADMIN + apparmor=unconfined,不用 privileged(实测默认 seccomp 对持 CAP_SYS_ADMIN 的进程放行 mount/unshare)。 // // 日志:EXECUTOR_LOG_LEVEL=debug|info|warn|error|none(默认 info,none/off 全静默),分级语义与 core 的 log.js 一致。 // info = 关键动作(启动/进程 start/exit/取消/关闭);debug = 额外打印与 core 的完整交互: // 每个请求行、/exec 请求体、每条 SSE 下发帧、每个 JSON 响应(超长内容截断显示)。改环境配置后重启容器生效。 // // 资源护栏(CPU/内存/进程数/单文件大小)不在本进程内实现,由 docker-compose 的 cgroup/ulimit 限制,见顶层 docker-compose.yml agent-executor 段。 // // 约定:core 与 executor 把同一份宿主机 ./tasks、./skills 挂到相同容器路径(/workspace/*), // 所以 core 下发的任务目录 cwd 在 executor 内原样可用。 const http = require('http'); const fs = require('fs'); const path = require('path'); const crypto = require('crypto'); const { spawn } = require('child_process'); const PORT = parseInt(process.env.PORT, 10) || 9000; const TOKEN = process.env.EXECUTOR_TOKEN || ''; const ROOTS = (process.env.EXECUTOR_ROOTS || '/workspace').split(',').map(s => s.trim()).filter(Boolean).map(p => path.resolve(p)); const DEFAULT_CWD = process.env.EXECUTOR_CWD || path.join(ROOTS[0], 'tasks'); // 任务根 realpath:/exec 一律拒绝 cwd 恰好等于它(见 handleExec)。拒绝后「任务根下的命令必进隔离 wrapper」成为硬不变式。 const REAL_TASK_ROOT = (() => { try { return fs.realpathSync(DEFAULT_CWD); } catch (_) { return null; } })(); // server.js 所在目录(镜像 WORKDIR /app):隔离 wrapper 用 tmpfs 盖住,不让 AI 读 executor 源码。 const APP_DIR = __dirname; const MAX_TIMEOUT = parseInt(process.env.EXECUTOR_MAX_TIMEOUT_MS, 10) || 30 * 60 * 1000; const DEFAULT_MAX_OUT = parseInt(process.env.EXECUTOR_MAX_OUTPUT_CHARS, 10) || 200000; const PING_MS = 15000; const BODY_LIMIT = 1024 * 1024; // /exec 请求体上限 1MB const runs = new Map(); // id -> { child, killedBy, started_at, cwd } // ---------- 分级日志(格式与 core 的 log.js 对齐: [] [executor] )---------- const LEVELS = { debug: 10, info: 20, warn: 30, error: 40 }; function parseLevel(l) { const s = String(l || 'info').trim().toLowerCase(); if (s === 'none' || s === 'off') return Infinity; return LEVELS[s] == null ? LEVELS.info : LEVELS[s]; } const LOG_LEVEL = parseLevel(process.env.EXECUTOR_LOG_LEVEL); const pad = (n, w) => String(n).padStart(w || 2, '0'); function stamp() { const d = new Date(); return d.getFullYear() + '-' + pad(d.getMonth() + 1) + '-' + pad(d.getDate()) + ' ' + pad(d.getHours()) + ':' + pad(d.getMinutes()) + ':' + pad(d.getSeconds()) + '.' + pad(d.getMilliseconds(), 3); } function emit(fn, level, args) { if (LEVELS[level] < LOG_LEVEL) return; const rest = Array.prototype.slice.call(args); const head = stamp() + ' [' + level + '] [executor]'; if (typeof rest[0] === 'string') rest[0] = head + ' ' + rest[0]; else rest.unshift(head); fn.apply(console, rest); } const log = { debug() { emit(console.log, 'debug', arguments); }, info() { emit(console.log, 'info', arguments); }, warn() { emit(console.warn, 'warn', arguments); }, error() { emit(console.error, 'error', arguments); }, }; // debug 交互日志的文本截断:保留可读性,超长只留头部并标注丢弃量。 function brief(s, n) { s = String(s); n = n || 2000; return s.length > n ? s.slice(0, n) + '…(+' + (s.length - n) + ')' : s; } // 单引号安全包裹:内部单引号按 '\'' 规则转义,给 sh -c 拼命令串用。 function shq(s) { return "'" + String(s).replace(/'/g, "'\\''") + "'"; } // per-task 挂载隔离 wrapper:返回一个 sh -c 脚本,shell 启动时跑(与 unshare --mount --pid --fork 配合): // 0) 重挂 proc 到新 pid ns(封掉 nsenter /proc/1/ns/mnt 逃逸),还原 /proc/sys 只读与 mask 遮蔽 // 1) 把 cwd 预先 bind 到 /tmp 下的 anchor(避开后面被覆盖的任务根) // 2) 在新 mount ns 里把任务根覆盖为 tmpfs(其他会话从此不可见);同法盖住 APP_DIR(源码遮蔽) // 3) 在 tmpfs 下重建当前会话目录名,把 anchor bind 回原路径上 // 4) 拆掉 anchor,切到 cwd,exec 用户命令(此时已是新 pid ns 的 PID 1) // cwd 不在任务根下时返回 null(不隔离;主要适用于 skill 入口直接跑在 /workspace/skills/ 的场景)。 // cwd 恰为任务根本身已在 handleExec 边界拒绝,首条分支仅作兜底。 function isolatedCommand(command, cwd) { if (cwd === DEFAULT_CWD || !cwd.startsWith(DEFAULT_CWD + path.sep)) return null; // 会话根 = 任务根下的第一层子目录(task-YYYYMMDD-NNN);cwd 可能是其下任意深子目录(terminal 的 cd)。 // 隔离时整个会话根 bind 回去,相对子路径自然保留,cd 回原 cwd 不会断。 const rel = path.relative(DEFAULT_CWD, cwd); const sessionName = rel.split(path.sep)[0]; const sessionRoot = path.join(DEFAULT_CWD, sessionName); // 遮蔽 executor 自身代码目录(镜像 WORKDIR,容器内 /app):tmpfs 盖住,AI 命令读不到 server.js。 // 任务根/cwd 与 WORKDIR 相互嵌套时(宿主机开发态,smoke 即如此)跳过,避免把任务树一起盖掉。 const hideWorkdir = !DEFAULT_CWD.startsWith(APP_DIR + path.sep) && !APP_DIR.startsWith(DEFAULT_CWD + path.sep) && !cwd.startsWith(APP_DIR + path.sep); return [ 'set -e', // pid/proc 侧:重挂 proc 绑定本 pid ns(flags 对齐 docker),/proc/1 自此即命令自身,无宿主 ns 句柄可指。 // 新 proc 是可写的,若不还原会顶掉 docker 防护:/proc/sys 可写→kernel.core_pattern 宿主 root 逃逸; // 新 mount 盖住旧 /proc 后 maskPaths(kcore/keys)失效;sysrq-trigger 虽非 docker 遮蔽,但可写 proc 下 // root+SYS_ADMIN 可 echo b 直接重启宿主机,一并遮蔽。mount 失败由 set -e 断令,fail-closed。 'mount -t proc -o nosuid,noexec,nodev proc /proc', 'mount --bind /dev/null /proc/kcore', 'mount --bind /dev/null /proc/keys', 'mount --bind /dev/null /proc/sysrq-trigger', 'mount --bind /proc/sys /proc/sys', 'mount -o remount,bind,ro /proc/sys', ...(hideWorkdir ? ['mount -t tmpfs tmpfs ' + shq(APP_DIR)] : []), 'anchor=$(mktemp -d /tmp/.exanchor.XXXXXXXXXX)', 'mount --bind ' + shq(sessionRoot) + ' "$anchor"', 'mount -t tmpfs tmpfs ' + shq(DEFAULT_CWD), 'mkdir ' + shq(sessionRoot), 'mount --bind "$anchor" ' + shq(sessionRoot), 'umount "$anchor"', 'rmdir "$anchor"', 'cd ' + shq(cwd), 'exec /bin/sh -c ' + shq(command), ].join('\n'); } // 常量时间比较,避免通过响应耗时猜 token function tokenOk(req) { if (!TOKEN) return true; const auth = String(req.headers.authorization || ''); const got = auth.startsWith('Bearer ') ? auth.slice(7) : ''; const a = Buffer.from(got), b = Buffer.from(TOKEN); if (a.length !== b.length) return false; return crypto.timingSafeEqual(a, b); } function send(res, status, obj) { log.debug('resp', status, brief(JSON.stringify(obj))); const body = JSON.stringify(obj); res.writeHead(status, { 'Content-Type': 'application/json; charset=utf-8' }); res.end(body); } function readJsonBody(req) { return new Promise((resolve, reject) => { let size = 0; const chunks = []; req.on('data', c => { size += c.length; if (size > BODY_LIMIT) { reject(new Error('请求体超过 ' + BODY_LIMIT + ' 字节')); req.destroy(); return; } chunks.push(c); }); req.on('end', () => { try { resolve(chunks.length ? JSON.parse(Buffer.concat(chunks).toString('utf8')) : {}); } catch (e) { reject(new Error('body 不是合法 JSON:' + e.message)); } }); req.on('error', reject); }); } // cwd 白名单校验:解析为绝对路径后必须位于某个 root 的 realpath 之下(含 root 本身)。 function checkCwd(raw) { let cwd; try { cwd = path.resolve(raw); } catch (_) { return null; } let real; try { real = fs.realpathSync(cwd); } catch (_) { return null; } // 不存在直接拒绝 for (const root of ROOTS) { let realRoot; try { realRoot = fs.realpathSync(root); } catch (_) { continue; } if (real === realRoot || real.startsWith(realRoot + path.sep)) return real; } return null; } function killGroup(entry) { const child = entry.child; // detached 启动后 child 是组长:对 -pid 发信号可连子进程的子孙一起杀掉 try { process.kill(-child.pid, 'SIGKILL'); } catch (_) { try { child.kill('SIGKILL'); } catch (__) { /* 已退出 */ } } } function sseWrite(res, obj) { log.debug('sse →', brief(JSON.stringify(obj))); // 客户端断开后 res 已死:实测 Node 20 对 destroyed 的 write 静默丢弃,但不依赖该行为,写前显式拦。 if (res.writableEnded || res.destroyed) return; res.write('data: ' + JSON.stringify(obj) + '\n\n'); } async function handleExec(req, res) { let args; try { args = await readJsonBody(req); } catch (e) { return send(res, 400, { error: e.message }); } log.debug('exec ←', brief(JSON.stringify(args))); const command = String(args.command || ''); if (!command.trim()) return send(res, 400, { error: 'command 必填' }); const rawCwd = args.cwd ? String(args.cwd) : DEFAULT_CWD; // 缺省落任务根 → 下面边界拒绝,等效必填 const cwd = checkCwd(rawCwd); if (!cwd) return send(res, 400, { error: 'cwd 不存在或不在白名单目录内:' + rawCwd + '(允许:' + ROOTS.join(', ') + ')' }); if (REAL_TASK_ROOT && cwd === REAL_TASK_ROOT) { return send(res, 400, { error: 'cwd 不能是任务根本身(全部会话目录的父目录,在其下执行会暴露所有会话):请在具体会话子目录内执行:' + rawCwd }); } let timeout = parseInt(args.timeout_ms, 10); if (!isFinite(timeout) || timeout <= 0) timeout = 5 * 60 * 1000; timeout = Math.min(Math.max(timeout, 1000), MAX_TIMEOUT); let maxChars = parseInt(args.max_output_chars, 10); if (!isFinite(maxChars) || maxChars <= 0) maxChars = DEFAULT_MAX_OUT; maxChars = Math.min(maxChars, DEFAULT_MAX_OUT); const env = Object.assign({}, process.env); if (args.env && typeof args.env === 'object') { for (const [k, v] of Object.entries(args.env)) env[String(k)] = String(v); } // 剥掉鉴权 token(合并后再删,防 args.env 重注):AI 命令拿到 token 即可从容器内回环 POST /exec, // 以任意(他人会话)cwd 起命令,绕过 per-task 隔离。server 侧比对用的是 TOKEN 常量,不受影响。 delete env.EXECUTOR_TOKEN; const id = crypto.randomUUID(); let child; try { // 任务根下的命令走 unshare(2) + mount(2):新 mount ns 里用 tmpfs 盖住 /workspace/tasks 只留当前会话目录; // 新 pid ns(--pid --fork)+ wrapper 重挂 proc,封掉借 /proc/1/ns/mnt nsenter 回原始 ns 的逃逸路径(详见 isolatedCommand)。 // cwd 在任务根外(如 skill 入口跑在技能目录)时直接 spawn。 const isolation = isolatedCommand(command, cwd); if (isolation) { child = spawn('unshare', ['--mount', '--pid', '--fork', '/bin/sh', '-c', isolation], { cwd, env, detached: true, stdio: ['ignore', 'pipe', 'pipe'] }); } else { child = spawn('/bin/sh', ['-c', command], { cwd, env, detached: true, stdio: ['ignore', 'pipe', 'pipe'] }); } } catch (e) { return send(res, 500, { error: 'spawn 失败:' + e.message }); } const entry = { child, killedBy: null, started_at: Date.now(), cwd, timer: null }; runs.set(id, entry); log.info('start', id, 'pid=' + child.pid, 'cwd=' + cwd, 'timeout=' + timeout + 'ms', JSON.stringify(command).slice(0, 200)); res.writeHead(200, { 'Content-Type': 'text/event-stream; charset=utf-8', 'Cache-Control': 'no-cache', 'Connection': 'keep-alive', 'X-Accel-Buffering': 'no', // nginx 前置时对 SSE 关缓冲(配合 core 的 proxy_buffering off 习惯) }); const ping = setInterval(() => { if (!res.writableEnded && !res.destroyed) res.write(': ping\n\n'); }, PING_MS); // 先下发 start 事件:core 靠这里的 id 调 DELETE /exec/:id 取消 sseWrite(res, { type: 'start', id, pid: child.pid, cwd }); // 输出计数:超限后停止下发(truncated),但仍要持续消费流,防子进程因管道满阻塞。 const out = { stdout: 0, stderr: 0, truncated: false }; function streamChunk(kind, chunk) { const key = kind === 'out' ? 'stdout' : 'stderr'; const text = chunk.toString('utf8'); const remain = maxChars - out[key]; if (remain <= 0) { out.truncated = true; return; } if (text.length > remain) { out.truncated = true; sseWrite(res, { type: kind, chunk: text.slice(0, remain) }); out[key] = maxChars; return; } out[key] += text.length; sseWrite(res, { type: kind, chunk: text }); } child.stdout.on('data', c => streamChunk('out', c)); child.stderr.on('data', c => streamChunk('err', c)); entry.timer = setTimeout(() => { entry.killedBy = 'timeout'; killGroup(entry); }, timeout); // core 断开连接(取消/重启):连带杀掉进程,防孤儿。 res.on('close', () => { if (runs.has(id)) { entry.killedBy = entry.killedBy || 'disconnected'; killGroup(entry); } }); function finish(code) { if (!runs.has(id)) return; clearTimeout(entry.timer); clearInterval(ping); runs.delete(id); // 清理与日志先行:客户端已断开(destroyed,writableEnded 恒 false)也要留 exit 痕迹; // 之后不再碰 res:不对已死/已 end 的响应 write(sseWrite 内有同款守卫兜底)也不重复 end()。 log.info('exit ', id, 'code=' + code, 'killed_by=' + entry.killedBy, 'out=' + out.stdout + 'B err=' + out.stderr + 'B'); if (res.writableEnded || res.destroyed) return; sseWrite(res, { type: 'exit', code, signal: child.signalCode, killed_by: entry.killedBy, stdout_chars: out.stdout, stderr_chars: out.stderr, truncated: out.truncated, }); res.end(); } child.on('error', err => { entry.killedBy = entry.killedBy || 'spawn_error'; log.error('spawn error', id, err.message); streamChunk('err', Buffer.from('spawn 失败:' + err.message + '\n')); finish(-1); }); child.on('close', (code) => finish(entry.killedBy ? -1 : (code === null ? -1 : code))); } function handleKill(req, res, id) { const entry = runs.get(id); if (!entry) return send(res, 404, { error: '没有该执行任务(可能已结束)' }); entry.killedBy = 'cancelled'; killGroup(entry); send(res, 200, { ok: true, id }); } const server = http.createServer(async (req, res) => { log.debug('req ', req.method, req.url); const url = new URL(req.url, 'http://x'); const seg = url.pathname.split('/').filter(Boolean); if (url.pathname === '/health') return send(res, 200, { ok: true, time: Date.now(), running: Array.from(runs.entries()).map(([id, e]) => ({ id, pid: e.child.pid, cwd: e.cwd, started_at: e.started_at })) }); if (!tokenOk(req)) { log.warn('auth', '拒绝(token 缺失或错误)', req.method, url.pathname); return send(res, 401, { error: '缺少或错误的 Authorization: Bearer token' }); } try { if (req.method === 'POST' && url.pathname === '/exec') return await handleExec(req, res); if (req.method === 'DELETE' && seg.length === 2 && seg[0] === 'exec') return handleKill(req, res, seg[1]); } catch (e) { log.error('处理异常:', e.message); if (!res.headersSent) send(res, 500, { error: e.message }); else res.end(); return; } send(res, 404, { error: '未知路由 ' + req.method + ' ' + url.pathname }); }); server.listen(PORT, () => { log.info('listening on ' + PORT + ' roots=' + ROOTS.join(', ') + ' default_cwd=' + DEFAULT_CWD + ' auth=' + (TOKEN ? 'token' : 'off') + ' log_level=' + (process.env.EXECUTOR_LOG_LEVEL || 'info')); }); // 退出前杀掉所有在跑的进程组,防容器停止后遗留 function shutdown(sig) { log.info('收到 ' + sig + ',停止服务(杀掉 ' + runs.size + ' 个运行中任务)'); for (const entry of runs.values()) { entry.killedBy = 'shutdown'; killGroup(entry); } server.close(() => process.exit(0)); setTimeout(() => process.exit(0), 3000).unref(); } process.on('SIGTERM', () => shutdown('SIGTERM')); process.on('SIGINT', () => shutdown('SIGINT'));