用Agent Plan解锁AI导演体验：通过CUA搭Blender白模指导武侠视频生成

原创

Agent Plan
Agent Plan

字节跳动技术团队

2026年10月8日 19:02
北京

在小说阅读器读本章

去阅读

在公众号小说中沉浸阅读

用 AI 直接生成一段带动作和运镜的视频，最容易卡住的地方是：动作和镜头对不上你想要的效果。

提示词里写  \"360 度环绕镜头\"\" 第 7 秒主角撩剑反击 \"，模型往往给不出稳定结果 —— 动作节点偏移、镜头节奏随机、分镜顺序漂移，多调几轮提示词也未必收敛。

这篇文章想分享的是我们在实践中跑通的一条思路：使用 Agent Plan 中的专属 Harness —— CUA（Computer Use Agent），操作最近火热的 Blender，零门槛将一句武侠创意转化为白模预演和可控的视频成片。

思路其实很像真正的导演拍片：先把人物关键动作、运镜轨迹定下来，Blender 白模则提供了这样的三维空间。再把这段白模视频作为参考喂给生视频模型。火山方舟 Agent Plan 套餐覆盖全流程所需的模型及Harness，由 Agent 自动操控云桌面中的 Blender，从创意构思、白模搭建，到一键生成电影感成片，全程无需专业基础，纯小白也能解锁 AI 导演体验。

核心亮点：

• CUA操作Blender简单易用：让 Agent 直接使用云桌面中的专业三维软件，串联建模、动画、运镜和渲染，0门槛白模视频制作。
• 全模态模型及专属 Harness升级：Agent Plan套餐支持多模态模型，集成字节SOTA级 Seedance、Seedream 生图生视频模型能力，串联从创意构思、动作设计到视频成片的完整流程。
• 兼容主流工具：多生态兼容，无缝接入 Claude Code、Codex等主流编程及 Agent 工具。
• 用量清晰可查：采用 Agent 燃料值（AFP）作为统一用量单位，额度用量清晰可查。

下面我们用一个武侠主题的视频生成案例，完整展现从创意到 20 秒武侠成片的全过程。

下面我们用一个武侠主题的视频生成案例，完整展现从创意到 20 秒武侠成片的全过程。

一、视频生成案例

已关注

关注

重播 分享 赞

关闭

观看更多

更多

退出全屏

切换到竖屏全屏退出全屏

字节跳动技术团队已关注

分享视频

，时长00:20

0/0

00:00/00:20

切换到横屏模式

继续播放

[ ]

进度条，百分之0

播放

00:00

/

00:20

00:20

倍速

全屏

倍速播放中

0.5倍0.75倍1.0倍1.5倍2.0倍

超清流畅

继续观看

用Agent Plan解锁AI导演体验：通过CUA搭Blender白模指导武侠视频生成

观看更多

转载

,

用Agent Plan解锁AI导演体验：通过CUA搭Blender白模指导武侠视频生成

字节跳动技术团队已关注

分享点赞在看

已同步到看一看写下你的评论

视频详情

四、AFP 用量消耗

本案例包含 Blender 白模预演 + 参考图生成 + 最终视频生成，需统计整条制作流程，不能只计算 Blender 渲染或最终一次生成。AFP 详情参见官方AFP抵扣规则（https://s.c1ns.cn/2wQid），实际消耗以方舟控制台账单为准。

这套 「白模预演 → 参考帧 → 生视频」的流程并不局限于武侠短片。科幻机甲追逐、都市动作戏、古风场景调度等对动作和镜头时序有要求的内容，都可以沿用同样的思路 —— 先用白模把节奏和机位定准，再交给生视频模型出画面。

目前 CUA（Computer Use Agent）已在 Agent Plan 的 Medium 及以上套餐开放，Large 及以上套餐支持 Seedance 生视频模型。想体验AI导演的创作流程，可以直接按文章中的步骤跑一遍。