- docker-compose: expose 3000 → ports(WEB_SEARCH_PORT/IMAGE_GEN_PORT/VIDEO_GEN_PORT 可覆盖,默认 8081/8082/8083),去掉 VIRTUAL_HOST/VIRTUAL_PORT/CERT_NAME - video_gen: PUBLIC_BASE_URL 改为环境变量(默认 http://localhost:8083) - 新增根 README:部署步骤、端口变量、端口暴露范围(8083 需对外,8081/8082 建议只内网) - image_gen / video_gen / web_search README: 域名 URL 全部改为 IP:端口
MCP Video Gen
基于 Model Context Protocol (MCP) 的视频生成服务,对接智谱 BigModel 的视频生成异步接口,支持文生视频和图生视频。Server 只负责提交任务 + 单次查询结果,不内部轮询——AI 拿到 task_id 后自己决定什么时候调用 query_video 复查。
- 协议:MCP Streamable HTTP(单端点
/mcp,支持 SSE 流) - 上游:智谱 BigModel 视频生成(异步) + 查询异步结果
- 默认模型:
cogvideox-flash - 端口:
3000 - 鉴权:无服务端密钥,每次请求必须从 header 携带智谱 token
- 附带
/upload端点:供 AI 临时上传本地图片获取 URL(不持久化,容器重启即丢)
快速开始
启动(docker-compose)
仓库根目录 docker-compose.yml 已包含本服务:
cd /root/workspace/tools/mcp
docker compose up -d --build mcp_video_gen
服务容器名 mcp_video_gen,容器内端口 3000,默认映射到宿主机 8083,即 http://<服务器IP>:8083/mcp。
直接连容器调试:
docker exec -it mcp_video_gen sh
# 或本机(宿主机映射端口)
curl http://localhost:8083/health
# {"status":"ok","service":"video_gen","sessions":0}
MCP 客户端配置
Claude Desktop / Cursor 等支持 headers 配置的客户端
// Claude Desktop: ~/Library/Application Support/Claude/claude_desktop_config.json
// Cursor: ~/.cursor/mcp.json
{
"mcpServers": {
"video_gen": {
"url": "http://<服务器IP>:8083/mcp",
"headers": {
"Authorization": "Bearer <your-zhipu-api-key>"
}
}
}
}
重要:客户端必须在 每一个 HTTP 请求(
initialize/notifications/initialized/tools/call)都带上Authorizationheader。
工具一览
| 工具 | 作用 | 同步/异步 |
|---|---|---|
video_gen |
提交一个视频生成任务,立刻返回 task_id |
同步(仅提交) |
query_video |
用 task_id 拉一次当前结果 |
同步(单次查询,不轮询) |
上传图片:POST /upload
供 AI 临时上传本地图片、拿到 URL 后喂给 video_gen.image_url。不走 MCP、不走鉴权:以前靠反代控制访问,现在端口直连,只能靠宿主机防火墙/安全组控制(做图生视频时 PUBLIC_BASE_URL 指向该端口,智谱服务器得能取到图)。不需要图生视频就别对公网放行该端口。
配置
通过环境变量告诉服务端「对外公开的 base URL」,用于拼接返回的 url 字段:
# docker-compose.yml(无域名部署:填服务器 IP + 宿主机映射端口)
environment:
- PUBLIC_BASE_URL=http://<服务器IP>:8083
必须填外部可达地址:这个 URL 会交给智谱服务器去下载,填 localhost 或内网地址都会拉不到图。
compose 未提供时的默认值是 http://localhost:8083(只适合本机 curl 调试);代码本身的 fallback 是 http://localhost:3000。
可选环境变量:
| 变量 | 默认 | 说明 |
|---|---|---|
PUBLIC_BASE_URL |
http://localhost:8083(compose 提供;代码 fallback http://localhost:3000) |
返回 url 字段里拼接的对外 base URL |
UPLOAD_DIR |
/tmp/video_gen_uploads |
磁盘存储目录(容器内临时) |
UPLOAD_TTL_HOURS |
24 |
超过该小时数的文件会在启动时和每小时被自动删除 |
接口
POST /upload
Content-Type: multipart/form-data
file: <二进制图片文件>
限制
| 项 | 值 |
|---|---|
| 最大体积 | 8MB(智谱 image_url 上限5MB,留余量) |
| 白名单 content-type | image/png、image/jpeg、image/jpg |
| 存储位置 | 容器内 /tmp/video_gen_uploads/(UPLOAD_DIR 可覆盖) |
| 持久化 | 不持久化。容器重启即丢,请尽快消费 URL |
| 过期清理 | 启动时 + 每小时一次删除 >UPLOAD_TTL_HOURS 的文件,默认 24h |
| 鉴权 | 无 |
返回
{
"url": "http://<服务器IP>:8083/uploads/abc123.png",
"filename": "abc123.png",
"size": 12345,
"content_type": "image/png",
"original_name": "my-cat.png"
}
返回的 url 可直接作为 video_gen.image_url 使用。
端口与路由
/upload 与 /uploads/* 由 mcp_video_gen 同一进程提供,不需要单独配路由;compose 已把
容器 3000 映射到宿主机 VIDEO_GEN_PORT(默认 8083),两条路径直接可用:
POST /uploadGET /uploads/*
curl 示例
curl -F "file=@/tmp/cat.png" http://<服务器IP>:8083/upload
# {"url":"http://<服务器IP>:8083/uploads/xxxxxxxx-xxxx-xxxx-xxxx-xxxxxxxxxxxx.png", ...}
# 然后把 url 喂给 MCP:
# tool: video_gen
# args: { image_url: "http://<服务器IP>:8083/uploads/xxx.png", prompt: "..." }
工具:video_gen
提交一个视频生成任务,支持文生视频和图生视频。prompt 为必填;图生视频另传 image_url(两者都传也行,此时 prompt 会附加为运动/动作描述)。
参数(AI 可见)
| 名称 | 类型 | 必填 | 说明 |
|---|---|---|---|
prompt |
string | ✅ | 视频文本描述,最大 512 字符 |
image_url |
string (URL) | ❌ | 参考图 URL(单张,不支持数组 / 多张 / 首尾帧)。图片 ≤ 5MB,格式 png/jpeg/jpg。本地文件请走 /upload |
size |
string | ❌ | 视频尺寸,例如 1920x1080、1080x1920、1024x1024、1280x960 等 |
with_audio |
boolean | ❌ | 是否生成 AI 音效,默认 false |
服务端 Header 覆盖项(AI 看不到)
| Header | 类型 | 默认 | 说明 |
|---|---|---|---|
X-Video-Gen-Model / X-Mcp-Model / X-Model |
string | cogvideox-flash |
覆盖模型 |
X-Video-Gen-Quality |
string | speed |
speed(速度优先)或 quality(质量优先) |
X-Video-Gen-Fps |
int | 30 |
30 或 60 |
X-Video-Gen-Watermark |
bool | true |
是否添加 AI 水印;关闭需先在智谱后台签署免责声明 |
模型名串识别顺序(首个非空值生效):X-Video-Gen-Model → X-Mcp-Model → X-Model → 默认。
返回
工具立刻返回智谱提交结果:
{
"content": [
{ "type": "text", "text": "Model: cogvideox-flash\ntask_id: xxxxxxxx-xxxx-xxxx-xxxx-xxxxxxxxxxxx\nrequest_id: yyyyyyyy-yyyy-yyyy-yyyy-yyyyyyyyyyyy\ntask_status: PROCESSING\n\nVideo generation is asynchronous. Call query_video with task_id=\"xxxxxxxx-xxxx-xxxx-xxxx-xxxxxxxxxxxx\" to fetch the result." }
]
}
task_status 通常为 PROCESSING,极少数情况下可能直接 SUCCESS(极快完成的短任务)。
工具:query_video
根据 task_id 拉一次智谱异步结果。不内部轮询——AI 自己决定调几次、调多频。
参数(AI 可见)
| 名称 | 类型 | 必填 | 说明 |
|---|---|---|---|
task_id |
string | ✅ | video_gen 返回的 id |
返回
SUCCESS:返回Video URL(智谱签名 URL,24h 左右有效,需及时转存),外加一张Cover封面图:{ "content": [ { "type": "text", "text": "task_id: ...\nmodel: cogvideox-flash\ntask_status: SUCCESS\nVideo URL: https://...\nCover: https://..." }, { "type": "text", "text": "https://...video url..." } ] }PROCESSING:isError: false,正文给出当前状态,建议稍候再查。FAIL:isError: true,正文含task_status和智谱返回的error详情。
鉴权细节
每个 HTTP 请求必须携带智谱 API Token,server 从以下 header 字段按顺序识别,首个非空值生效:
| 优先级 | Header | 说明 |
|---|---|---|
| 1 | X-Video-Gen-Token: <token> |
直传,避免与客户端自身的 Authorization 冲突 |
| 2 | X-Mcp-Token: <token> |
通用兜底 |
| 3 | Authorization: Bearer <token> |
标准 OAuth 风格(排最后是为避免误用) |
Token 仅在每次 tool call 时从 header 读取,不写入任何存储、不进 session。
错误响应
| 场景 | HTTP 状态 | 表现 |
|---|---|---|
| initialize 时缺 token | 401 |
JSON-RPC error.message 提示补充 header |
| 智谱 API 4xx/5xx | 200(MCP 工具返回) |
isError: true,正文含智谱返回的状态码和 body |
| 网络失败 | 200(MCP 工具返回) |
isError: true,正文含 fetch 错误信息 |
推荐用法(AI 视角)
1. 如果手头是【本地文件】:先调 POST {PUBLIC_BASE_URL}/upload 拿到 url,再进第 2 步
2. 调用 video_gen({ prompt, image_url?, size?, with_audio? })
3. 拿到 task_id → 等待若干秒(建议 2~5 秒)
4. 调用 query_video({ task_id })
- 若 PROCESSING → 等一会再调
- 若 SUCCESS → 拿到 video URL,贴给用户 / 下载 / 二次编辑
- 若 FAIL → 展示错误信息,结束
video_gen的 tool description 里已经嵌入了完整 curl 上传命令,AI 一看就知道怎么传本地图片。
用 curl 手工调试
MCP Streamable HTTP 不是普通 REST,必须按顺序:initialize → notifications/initialized → tools/call。下面用一行版串起来:
# 把 <your-zhipu-api-key> 替换成你智谱的 API Key
TOKEN="<your-zhipu-api-key>"
# 1. initialize 拿 sessionId
SESSION=$(curl -s -D - -X POST http://localhost:8083/mcp \
-H "Content-Type: application/json" \
-H "Accept: application/json, text/event-stream" \
-H "Authorization: Bearer $TOKEN" \
-d '{
"jsonrpc": "2.0",
"id": 1,
"method": "initialize",
"params": {
"protocolVersion": "2024-11-05",
"capabilities": {},
"clientInfo": { "name": "curl", "version": "1.0" }
}
}' | grep -i '^mcp-session-id:' | awk '{print $2}' | tr -d '\r\n')
echo "Session: $SESSION"
# 2. notifications/initialized
curl -s -X POST http://localhost:8083/mcp \
-H "Content-Type: application/json" \
-H "Accept: application/json, text/event-stream" \
-H "Authorization: Bearer $TOKEN" \
-H "Mcp-Session-Id: $SESSION" \
-d '{"jsonrpc": "2.0", "method": "notifications/initialized"}'
# 3. 列出工具(可选验证)
curl -s -X POST http://localhost:8083/mcp \
-H "Content-Type: application/json" \
-H "Accept: application/json, text/event-stream" \
-H "Authorization: Bearer $TOKEN" \
-H "Mcp-Session-Id: $SESSION" \
-d '{"jsonrpc": "2.0", "id": 2, "method": "tools/list"}'
# 4. 提交文生视频任务
curl -s -X POST http://localhost:8083/mcp \
-H "Content-Type: application/json" \
-H "Accept: application/json, text/event-stream" \
-H "Authorization: Bearer $TOKEN" \
-H "Mcp-Session-Id: $SESSION" \
-d '{
"jsonrpc": "2.0",
"id": 3,
"method": "tools/call",
"params": {
"name": "video_gen",
"arguments": {
"prompt": "A cat is playing with a ball.",
"size": "1920x1080",
"with_audio": true
}
}
}'
# 5. 查结果(替换下面的 <task_id>)
curl -s -X POST http://localhost:8083/mcp \
-H "Content-Type: application/json" \
-H "Accept: application/json, text/event-stream" \
-H "Authorization: Bearer $TOKEN" \
-H "Mcp-Session-Id: $SESSION" \
-d '{
"jsonrpc": "2.0",
"id": 4,
"method": "tools/call",
"params": {
"name": "query_video",
"arguments": { "task_id": "<task_id>" }
}
}'
响应是 SSE 格式(event: message + data: {...}),用 grep '^data:' 抽 JSON 即可。
单独调试 /upload
# 上传图片,返回 url(宿主机映射端口)
curl -F "file=@/tmp/cat.png" http://localhost:8083/upload
# {"url":"http://localhost:8083/uploads/xxx.png", ...}
# 下载上传过的文件
curl -o cat.png http://localhost:8083/uploads/xxx.png
架构与文件
video_gen/
├── Dockerfile # node:22-slim,安装依赖后启动 MCP HTTP server
├── .dockerignore # 排除 node_modules
package.json # @modelcontextprotocol/sdk + express + multer
├── README.md # 本文件
└── src/
└── mcp-server.js # 单文件实现:HTTP server + MCP transport + 双工具
关键设计
- 每 session 一个 transport + server:通过
Mcp-Session-Id复用,避免每请求重建 - Token 闭包注入:在 Express 入口处从 header 提取 token,闭包传给 tool 回调;不依赖 SDK 内部字段
- AI 可见 vs AI 不可见:
- AI 只看到
prompt / image_url / size / with_audiomodel / quality / fps / watermark_enabled全部由 HTTP header 注入,避免 AI 误传或被诱导调高价档
- AI 只看到
- 异步语义暴露给 AI:服务端不做轮询,
video_gen只提交、query_video只查一次。AI 自主决定节奏 - 服务端自动
request_id:每次提交服务端生成一个 UUID 作为智谱request_id,便于日志关联,但不暴露给 AI - 上传接口与 MCP 走同一进程:额外
POST /upload+GET /uploads/*不走 MCP、不鉴权,靠内网隔离;PUBLIC_BASE_URL环境变量控制返回 URL 的拼接 host,AI 看到的 tool description 启动时拼接进真实地址,避免 AI 自由发挥 - 上传过期清理:启动时 + 每小时一次删除
mtime > UPLOAD_TTL_HOURS的文件,避免磁盘被不消费的上传堆满;清理 timer 用unref()不阻塞进程退出
默认模型
// src/mcp-server.js
const DEFAULT_MODEL = "cogvideox-flash";
修改后 docker compose up -d --build mcp_video_gen 即可生效。
常见问题
Q: AI 拿到 task_id 后立刻调 query_video 一直 PROCESSING,怎么办? A: AI 自己 sleep 几秒再调(建议 2~5 秒间隔)。这是设计取舍:把节奏控制权交给 AI 模型,而不是服务端硬编码超时。
Q: 视频 URL 多久过期? A: 智谱签发 URL 默认 24h 左右。需要在收到后及时转存到自己的 OSS/S3。
Q: 为什么 quality / fps 不让 AI 直接传?
A: 这些是技术档位,与成本/单价挂钩。让 AI 自主挑 quality=quality + fps=60 会爆账号预算。改成 header 由部署方注入更可控。
Q: 能否限制 size 白名单?
A: 当前透传给智谱 API,不做强制校验。如需加白名单,修改 src/mcp-server.js 中 video_gen 的 size schema 即可。
Q: 报错 Missing valid Mcp-Session-Id?
A: 漏发了 Mcp-Session-Id header,或调 tools/call 前没先 initialize。
Q: 同一 task_id 能并发查吗?
A: 可以。/async-result/{id} 是幂等的读接口,并发无副作用。
Q: 换模型需要重连 MCP session 吗?
A: 不需要。Model header 在每次 tools/call 都从当前请求读取。
Q: 上传的图片多久过期?
A: 容器重启即丢(本服务不持久化)。请在上传后立刻把返回的 url 喂给 video_gen.image_url。URL 本身只有可访问性,不受单独 TTL 限制;但容器一旦重启,该文件物理消失,URL 变 404。
Q: PUBLIC_BASE_URL 不设会怎样?
A: compose 会给个默认值 http://localhost:8083(代码 fallback 是 http://localhost:3000),本机 curl 调试没问题,但智谱服务器拉不到图——图生视频会失败。所以无域名部署时要显式设成 http://<服务器IP>:<宿主机映射端口>,并确保该端口对公网可达。