部署:video_gen 双监听(全量 3000 内网 / 只读 3001 公网供中转),mcp 默认不占宿主机端口

- video_gen: UPLOAD_BASE_URL(AI 上传,内网)与 PUBLIC_BASE_URL(智谱下载,公网)拆开配置;
  新增 PUBLIC_PORT 公网只读监听,只挂 GET /uploads/*(无 /mcp、无 POST /upload)
- video_gen: 上传目录落到宿主 ./uploads(重启不让已发出的 URL 失效),Dockerfile EXPOSE 3000 3001
- docker-compose: 三个服务默认都不映射宿主机端口(调试用的 ports 注释保留);
  video_gen 配 UPLOAD_BASE_URL/PUBLIC_BASE_URL/PUBLIC_PORT/UPLOAD_DIR + ./uploads 挂载
- .gitignore(新): node_modules/ 与 uploads/
- 文档: 根 README 说明「只开 agent 端口」与图片到智谱的完整链路;三个子 README 同步端口与调试方式
This commit is contained in:
2026-09-15 19:40:53 +08:00
parent e633f9b7c3
commit 8f693d0753
8 changed files with 241 additions and 113 deletions
+79 -46
View File
@@ -5,9 +5,9 @@
- 协议:MCP **Streamable HTTP**(单端点 `/mcp`,支持 SSE 流)
- 上游:[智谱 BigModel 视频生成(异步)](https://docs.bigmodel.cn/api-reference/模型-api/视频生成异步) + [查询异步结果](https://docs.bigmodel.cn/api-reference/模型-api/查询异步结果)
- 默认模型:`cogvideox-flash`
- 端口:`3000`
- 端口:容器内 `3000`(`/mcp` + `POST /upload` + `GET /uploads/*`,**容器外不映射**)、容器内 `3001`(公网只读的 `GET /uploads/*`)
- 鉴权:**无服务端密钥**,每次请求必须从 header 携带智谱 token
- 附带 `/upload` 端点:供 AI 临时上传本地图片获取 URL(**不持久化**,容器重启即丢)
- 附带 `/upload`:供 AI 上传本地图片换取 URL(写路径只在 docker 内网可达;落宿主 `./uploads/`,按 TTL 自动清理)
---
@@ -22,17 +22,18 @@ cd /root/workspace/tools/mcp
docker compose up -d --build mcp_video_gen
```
服务容器名 `mcp_video_gen`,容器内端口 3000,默认映射到宿主机 8083,即 `http://<服务器IP>:8083/mcp`。
直接连容器调试:
服务容器名 `mcp_video_gen`,**默认不占宿主机端口**:由 agent 走 `my-app-network` 按容器名访问
(`http://mcp_video_gen:3000/mcp`)。需要从宿主机 curl 调试时,去仓库根 `docker-compose.yml`
把 `mcp_video_gen` 注释掉的 `ports` 两行打开(映的是只读监听 3001)。
```bash
docker exec -it mcp_video_gen sh
# 或本机(宿主机映射端口)
curl http://localhost:8083/health
# 容器内健康检查(无需占端口)
docker exec mcp_video_gen node -e "fetch('http://localhost:3000/health').then(r=>r.text()).then(console.log)"
# {"status":"ok","service":"video_gen","sessions":0}
```
> 下文 curl 示例里的 `localhost:8083` 均指“临时打开了调试端口”的情形。
### MCP 客户端配置
#### Claude Desktop / Cursor 等支持 `headers` 配置的客户端
@@ -43,7 +44,7 @@ curl http://localhost:8083/health
{
"mcpServers": {
"video_gen": {
"url": "http://<服务器IP>:8083/mcp",
"url": "http://localhost:8083/mcp",
"headers": {
"Authorization": "Bearer <your-zhipu-api-key>"
}
@@ -52,6 +53,8 @@ curl http://localhost:8083/health
}
```
> 上面 `url` 里的端口 `8083` 需要先把 compose 里注释的 `ports` 打开(默认不占宿主端口)。
> **重要**:客户端必须在 **每一个 HTTP 请求**(`initialize` / `notifications/initialized` / `tools/call`)都带上 `Authorization` header。
---
@@ -67,33 +70,44 @@ curl http://localhost:8083/health
## 上传图片:POST /upload
供 AI 临时上传本地图片、拿到 URL 后喂给 `video_gen.image_url`。**不走 MCP、不走鉴权**:以前靠反代控制访问,现在端口直连,只能靠宿主机防火墙/安全组控制(做图生视频时 `PUBLIC_BASE_URL` 指向该端口,智谱服务器得能取到图)。不需要图生视频就别对公网放行该端口。
供 AI 上传本地图片、拿到 URL 后喂给 `video_gen.image_url`。**不走 MCP、不走鉴权**,但**写路径只在内网**(容器内 3000,容器外不映射),
所以公网上没有任何写入入口。唯一公网可达的是**只读**的下载路径,而且由 agent-core 代拉:
### 配置
通过环境变量告诉服务端「对外公开的 base URL」,用于拼接返回的 `url` 字段:
```yaml
# docker-compose.yml(无域名部署:填服务器 IP + 宿主机映射端口)
environment:
- PUBLIC_BASE_URL=http://<服务器IP>:8083
```
AI(agent-executor 内 curl)
│ POST http://mcp_video_gen:3000/upload ← docker 内网,不经公网
▼
./uploads/<randomUUID>.png 返回 url = PUBLIC_BASE_URL + /uploads/<name>
│
▼
智谱服务器 ──匿名 GET──► http://<服务器IP>:<AGENT_PORT>/mcp-uploads/uploads/<name>
│ agent-core 只转发 GET/HEAD
▼
mcp_video_gen:3001(只读监听,那边没有 /upload)
```
必须填**外部可达**地址:这个 URL 会交给智谱服务器去下载,填 `localhost` 或内网地址都会拉不到图。
compose 未提供时的默认值是 `http://localhost:8083`(只适合本机 curl 调试);代码本身的 fallback 是 `http://localhost:3000`。
### 配置(两个地址刻意分开)
可选环境变量:
| 变量 | 作用 | 该填什么 |
|---|---|---|
| `UPLOAD_BASE_URL` | 拼进 tool description 里那条 curl,告诉 AI 往哪上传 | 内网地址 `http://mcp_video_gen:3000`(compose 已配好) |
| `PUBLIC_BASE_URL` | 拼进 `/upload` 返回的 `url` 字段,给**智谱**下载用 | **必须外部可达**:`http://<服务器IP>:<AGENT_PORT>/mcp-uploads` |
| `PUBLIC_PORT` | 只读监听的容器内端口(agent 的 `MCP_UPLOADS_URL` 指向它) | compose 里是 `3001`;留 `0` 则不开双监听 |
`UPLOAD_BASE_URL` 未设时会退回 `PUBLIC_BASE_URL`,两个都没设则都是 `http://localhost:<port>`(本机调试)。
启动日志会打印两个实际生效的地址,配错了一看就知道。
其它环境变量:
| 变量 | 默认 | 说明 |
|---|---|---|
| `PUBLIC_BASE_URL` | `http://localhost:8083`(compose 提供;代码 fallback `http://localhost:3000`) | 返回 `url` 字段里拼接的对外 base URL |
| `UPLOAD_DIR` | `/tmp/video_gen_uploads` | 磁盘存储目录(容器内临时) |
| `UPLOAD_DIR` | `/tmp/video_gen_uploads` | 磁盘存储目录;compose 里指向宿主挂载的 `/uploads` |
| `UPLOAD_TTL_HOURS` | `24` | 超过该小时数的文件会在启动时和每小时被自动删除 |
### 接口
```
POST /upload
POST /upload (只在容器内 3000,内网可达)
Content-Type: multipart/form-data
file: <二进制图片文件>
@@ -105,16 +119,16 @@ file: <二进制图片文件>
|---|---|
| 最大体积 | 8MB(智谱 `image_url` 上限5MB,留余量) |
| 白名单 content-type | `image/png`、`image/jpeg`、`image/jpg` |
| 存储位置 | 容器内 `/tmp/video_gen_uploads/`(`UPLOAD_DIR` 可覆盖) |
| 持久化 | **不持久化**。容器重启即丢,请尽快消费 URL |
| 存储位置 | 宿主 `./uploads/`(compose 挂到容器 `/uploads`,`UPLOAD_DIR` 可覆盖) |
| 持久化 | 落盘,重启不失效;但按 TTL 到期自动删,**不要依赖长期 URL** |
| 过期清理 | 启动时 + 每小时一次删除 `>UPLOAD_TTL_HOURS` 的文件,默认 24h |
| 鉴权 | 无 |
| 鉴权 | 无(靠“不映射到宿主机”隔离;AI 走内网访问) |
### 返回
```jsonc
{
"url": "http://<服务器IP>:8083/uploads/abc123.png",
"url": "http://<服务器IP>:8090/mcp-uploads/uploads/abc123.png",
"filename": "abc123.png",
"size": 12345,
"content_type": "image/png",
@@ -122,25 +136,44 @@ file: <二进制图片文件>
}
```
返回的 `url` 可直接作为 `video_gen.image_url` 使用。
返回的 `url` 可直接作为 `video_gen.image_url` 使用(前缀 = `PUBLIC_BASE_URL`)。
### 端口与路由
`/upload` 与 `/uploads/*` 由 `mcp_video_gen` 同一进程提供,不需要单独配路由;compose 已把
容器 3000 映射到宿主机 `VIDEO_GEN_PORT`(默认 8083),两条路径直接可用:
| 容器内端口 | 路由 | 容器外 |
|---|---|---|
| `3000` | `/mcp` + `POST /upload` + `GET /uploads/*` | 不映射,只在 `my-app-network` 内可达 |
| `3001`(`PUBLIC_PORT`) | 只有 `GET /uploads/*` + `/health` | 也不映射;由 agent-core 的 `MCP_UPLOADS_URL` 指向它代拉 |
- `POST /upload`
- `GET /uploads/*`
只读监听的意义:公网那条入站链路(智谱拉图)接的是它,所以即使 agent 侧中转有 bug 把写方法转过来,
这边也没路由可打(纵深防御)。
### curl 示例
```bash
curl -F "file=@/tmp/cat.png" http://<服务器IP>:8083/upload
# {"url":"http://<服务器IP>:8083/uploads/xxxxxxxx-xxxx-xxxx-xxxx-xxxxxxxxxxxx.png", ...}
默认不占宿主端口。推荐用 `docker exec` 在容器内测(不破坏安全边界):
# 然后把 url 喂给 MCP:
# tool: video_gen
# args: { image_url: "http://<服务器IP>:8083/uploads/xxx.png", prompt: "..." }
```bash
# 上传(走全量监听的 3000):把 /etc/hostname 当假图片,只为看返回结构
docker exec mcp_video_gen node -e "
const fs=require('fs');
const fd=new FormData();
fd.append('file',new File([fs.readFileSync('/etc/hostname')],'t.png',{type:'image/png'}));
fetch('http://localhost:3000/upload',{method:'POST',body:fd}).then(r=>r.json()).then(j=>console.log(j));
"
# 只读监听取文件(把 <name> 换成上一步返回的 filename)
docker exec mcp_video_gen node -e "fetch('http://localhost:3001/uploads/<name>').then(r=>console.log(r.status,r.headers.get('content-type')))"
# 只读监听上试写:应当 404(那边没有 /upload)
docker exec mcp_video_gen node -e "fetch('http://localhost:3001/upload',{method:'POST'}).then(r=>console.log(r.status))"
```
要从宿主机 curl 调试,临时把 compose 里注释的 `ports` 打开(打开的是只读侧 `8083:3001`;
想试上传就临时改成 `8083:3000`,测完记得改回来):
```bash
curl -sI http://localhost:8083/uploads/<name> # 只读侧取图:200
curl -s http://localhost:8083/upload # 只读侧写:404(本来就没这个路由)
```
---
@@ -236,7 +269,7 @@ Token 仅在每次 tool call 时从 header 读取,不写入任何存储、不
## 推荐用法(AI 视角)
```
1. 如果手头是【本地文件】:先调 POST {PUBLIC_BASE_URL}/upload 拿到 url,再进第 2 步
1. 如果手头是【本地文件】:先调 POST {UPLOAD_BASE_URL}/upload 拿到 url,再进第 2 步
2. 调用 video_gen({ prompt, image_url?, size?, with_audio? })
3. 拿到 task_id → 等待若干秒(建议 2~5 秒)
4. 调用 query_video({ task_id })
@@ -333,11 +366,11 @@ curl -s -X POST http://localhost:8083/mcp \
### 单独调试 `/upload`
```bash
# 上传图片,返回 url(宿主机映射端口)
# 上传(需先在 compose 里临时把 ports 打开成 8083:3000;默认不映射)
curl -F "file=@/tmp/cat.png" http://localhost:8083/upload
# {"url":"http://localhost:8083/uploads/xxx.png", ...}
# {"url":"http://<服务器IP>:8090/mcp-uploads/uploads/xxx.png", ...} ← 返回的是公网地址(PUBLIC_BASE_URL)
# 下载上传过的文件
# 直接从只读监听取文件(compose 默认那行就是 8083:3001)
curl -o cat.png http://localhost:8083/uploads/xxx.png
```
@@ -364,7 +397,7 @@ package.json # @modelcontextprotocol/sdk + express + multer
- `model / quality / fps / watermark_enabled` 全部由 HTTP header 注入,避免 AI 误传或被诱导调高价档
- **异步语义暴露给 AI**:服务端不做轮询,`video_gen` 只提交、`query_video` 只查一次。AI 自主决定节奏
- **服务端自动 `request_id`**:每次提交服务端生成一个 UUID 作为智谱 `request_id`,便于日志关联,但不暴露给 AI
- **上传接口与 MCP 走同一进程**:额外 `POST /upload` + `GET /uploads/*` 不走 MCP、不鉴权,靠内网隔离;`PUBLIC_BASE_URL` 环境变量控制返回 URL 的拼接 host,AI 看到的 tool description 启动时拼接进真实地址,避免 AI 自由发挥
- **上传接口与 MCP 走同一进程**:额外 `POST /upload` + `GET /uploads/*` 不走 MCP、不鉴权;写路径只在容器内 3000(不外映射),公网只暴露只读监听 3001。写入时的 `UPLOAD_BASE_URL` 与返回给智谱的 `PUBLIC_BASE_URL` **分开配置**(前者内网、后者公网),AI 看到的 tool description 启动时拼接进真实地址,避免 AI 自由发挥
- **上传过期清理**:启动时 + 每小时一次删除 `mtime > UPLOAD_TTL_HOURS` 的文件,避免磁盘被不消费的上传堆满;清理 timer 用 `unref()` 不阻塞进程退出
### 默认模型
@@ -402,7 +435,7 @@ A: 可以。`/async-result/{id}` 是幂等的读接口,并发无副作用。
A: 不需要。Model header 在每次 `tools/call` 都从当前请求读取。
**Q: 上传的图片多久过期?**
A: 容器重启即丢(本服务不持久化)。请在上传后立刻把返回的 `url` 喂给 `video_gen.image_url`。URL 本身只有可访问性,不受单独 TTL 限制;但容器一旦重启,该文件物理消失,URL 变 404。
A: 落宿主 `./uploads/`(重启不失效),但按 `UPLOAD_TTL_HOURS`(默认 24h)自动删除,所以拿到 `url` 后尽快喂给 `video_gen.image_url`。过期后 URL 变 404。
**Q: `PUBLIC_BASE_URL` 不设会怎样?**
A: compose 会给个默认值 `http://localhost:8083`(代码 fallback 是 `http://localhost:3000`),本机 curl 调试没问题,但智谱服务器拉不到图——图生视频会失败。所以无域名部署时要显式设成 `http://<服务器IP>:<宿主机映射端口>`,并确保该端口对公网可达。
A: compose 给个默认值 `http://localhost:8090/mcp-uploads`(代码 fallback 是 `http://localhost:<port>`)。本机调试无所谓,但智谱服务器拉不到图——图生视频会失败。无域名部署时要显式设成 `http://<服务器IP>:<AGENT_PORT>/mcp-uploads`,并确认 agent-core 那边配了 `MCP_UPLOADS_URL`(否则中转路由不存在)。启动日志会打印两个实际生效的地址,一眼就能看出配对没。