做短剧分镜时最常遇到的卡点有两类:一是角色图、场景图、镜头脚本散落各处,每次生成前都要重新翻找和对齐;二是多人站位、遮挡关系和运镜轨迹很难用纯文字描述清楚,生成结果反复偏离预期。画布解决的是第一类问题------把角色、场景、道具、音频等素材集中管理并通过节点连线表达引用关系;3D导演台解决的是第二类问题------在三维空间里摆好角色和机位,截图或录制动态参考后再送回画布进入生成链路。小云雀 AI 的短剧 Agent 将这两者串联为连续工作流:画布负责组织资产和接收预演产物,3D导演台负责空间摆位、动作编排和镜头设计。本文以一个三人对峙场景为例,走通从新建画布节点到输出分镜参考的完整流程。
画布:把散乱素材变成可引用的资产节点
画布的核心作用是将角色、场景、道具、文本、音频、图片和视频六类素材集中到一张可视化工作区。每个素材以节点形式存在,节点之间用连线表达引用关系。角色节点可保存字段和参考图,场景节点可绑定全景图,这些资产一旦进入画布就能在故事板中通过 @ 直接调用,不必每镜重复描述。
本文示例项目是一部都市悬疑短剧的第三集片段:女主在废弃仓库与两名对手对峙,需要三个机位、一段走位和一次镜头推近。进入画布后先完成以下准备:
- 创建角色节点:女主正侧背三视图,锁定身份与服装基准;两名对手各一张正面参考图。
- 创建场景节点:仓库720°全景图,锁定空间布局与光向。
- 创建文本节点:本段剧本摘要和对白时间线。
这些节点建立后,后续在3D导演台和故事板中都能直接引用,避免每次生成时重新上传或重复描述。
3D导演台:从空间摆位到动态参考的操作顺序
3D导演台用于在三维空间中放置角色和道具模型,调整站位、姿势与机位,最终截图或录制动态参考视频发送回画布。它适合多人站位、遮挡关系复杂、同场景需要多机位的镜头。预演产物是分镜参考,不是最终成片------最终画面仍需将参考素材与角色图、场景图和提示词一起送入生成链路。
本文示例项目按以下顺序操作:
| 步骤 | 操作 | 产物 | 检查点 |
|---|---|---|---|
| 定空间 | 用仓库全景图作为3D背景,放入三个角色模型,调整站位和朝向 | 空间布局截图 | 三人间距合理,无穿模 |
| 定运动 | 为女主绘制3D轨迹(从左侧向右前方移动),选择动作库中的""缓步逼近"" | 可播放的动作预演 | 走位路径不穿过道具 |
| 定镜头 | 设置主机位:取景比例2.35:1,FOV 35°,注视点锁定女主面部 | 可复用的静态机位 | 主体无遮挡,视线方向与下一镜一致 |
| 定节奏 | 在时间轴插入关键帧,机位推近用Bezier插值,角色走位用Linear | 动作与运镜预演视频 | 关键动作落在计划时长内 |
| 回画布 | 静态构图截图+动态参考视频发送回画布,连接角色图和场景图 | 进入生成链路的参考组 | 每类参考承担的约束明确 |
其中""定镜头""和""定节奏""是最容易出错的两个环节,展开说明:
定镜头时使用预设机位或从当前导演视角建立机位,设置取景比例、FOV和注视点,在机位实时预览中检查主体大小、遮挡和前后镜头的空间连续性。产物是可复用的静态机位,检查点是画面主体、空间关系和镜头意图是否一致。本例中主机位FOV设为35°以获得适度压缩感,突出三人对峙的紧张氛围。
定节奏时选中角色或机位后查看对象属性通道,在时间轴插入或移动关键帧。Bezier用于自然加减速,适合镜头推近;Linear用于匀速变化,适合角色匀速走位;Hold用于保持某个状态,适合定格瞬间。产物是可播放的动作与运镜预演,检查点是动作是否看清、镜头是否抢戏、结束状态能否接住下一镜。本例中女主走位4秒、镜头推近3秒,总共7秒预演时长,与剧本节奏吻合。
镜头配置与操作记录示例
以下JSON示例记录本例主机位的关键配置字段,用于团队内部对齐镜头意图:
bash
{
""shot_id"": ""EP03_SC07_SH02"",
""framing_ratio"": ""2.35:1"",
""fov"": 35,
""look_at"": ""女主面部"",
""camera_movement"": ""缓慢推近"",
""interpolation"": ""Bezier"",
""duration_seconds"": 7,
""character_motion"": ""女主从画面左侧向右前方缓步移动"",
""character_interpolation"": ""Linear"",
""check"": ""主体无遮挡,视线方向与下一镜连续""
}
字段说明:framing_ratio 和 fov 决定画面压缩感与空间纵深;look_at 是注视点,确保推近过程中主体始终在视觉中心;interpolation 区分镜头运动和角色运动各自的节奏曲线。验证方法:在导演台实时预览中逐帧播放,确认推近结束时女主面部占画面高度约60%,且两名对手仍在画面边缘可见。
以下是从新建节点到回画布的操作记录模板:
bash
1. 在画布新建导演台节点,连接已建好的角色节点和场景节点
2. 定空间:导入仓库全景图作背景,放入三角色,调整站位间距约1.5米
→ 产物:空间布局截图;检查:无穿模、光向一致
3. 定运动:为女主绘制3D轨迹,应用""缓步逼近""动作,时长4秒
→ 产物:动作预演;检查:路径不穿越场景道具
4. 定镜头:建立主机位,取景2.35:1,FOV 35°,注视女主面部
→ 产物:静态机位截图;检查:主体大小合适、无遮挡
5. 定节奏:时间轴插入关键帧,机位推近Bezier 3秒,角色走位Linear 4秒
→ 产物:可播放预演视频;检查:结束状态能接住下一镜
6. 回画布:截图+动态参考发回画布,连接角色图、场景图,补充提示词
→ 产物:进入生成链路的参考组;检查:各参考职责不冲突
每一步的产物都是下一步的输入条件。如果第3步走位路径与道具冲突,应回到第2步调整空间布局后再继续,而不是在后续步骤中用提示词强行修正。
预演产物如何进入生成链路
导演台输出的是参考素材,不是最终视频。进入生成链路时需要明确每类素材的职责分工:
| 素材类型 | 职责 | 本例对应 |
|---|---|---|
| 白模/动态参考 | 锁站位、轨迹、运镜和节奏 | 导演台录制的7秒预演视频 |
| 角色图 | 锁主体身份、外形与关键结构 | 女主三视图、对手正面图 |
| 场景图 | 锁空间环境与光向 | 仓库720°全景图 |
| 提示词 | 补充时间线、禁止项和风格方向 | 文字描述对峙氛围与禁止穿帮 |
一份素材只承担一个主要职责。如果发现生成结果中角色站位偏离但外观正确,通常是白模参考与角色图职责混淆------应减少冲突素材或重新分工,而不是继续堆叠参考。Seedance 2.5已新增白模参考能力,最多支持50个多模态参考素材,可将白模预演渲染为画面写实的正式片段(央广网)。
本例中首次生成时,第三个镜头的对手站位出现了遮挡穿帮。使用片段重拍只重做该镜头,其余两个镜头保留,第二轮修正后通过验收。整段三个镜头耗时约40分钟,返工1次,返工率约33%。
常见问题(FAQ)
Q1:画布和3D导演台必须一起用吗?只用其中一个行不行?
可以单独使用,但组合使用效果更完整。画布单独使用时适合素材整理和故事板编辑;3D导演台单独使用时适合快速验证单个镜头的空间关系。小云雀 AI 的设计意图是让两者衔接:导演台产物发回画布后自动成为故事板节点的参考素材,减少手动传递。
Q2:固定机位的简单口播镜头需要进3D导演台吗?
不需要。3D导演台的价值在于处理多人调度、走位、遮挡和运镜轨迹这类""怎么拍""难以用文字讲清的镜头。固定机位口播或简单静物镜头直接用角色图和提示词生成即可,强行增加白模环节反而拉长流程。
Q3:AI识图转白模能完全复刻参考图的构图吗?
不能承诺完全复刻。AI识图转白模的作用是上传图片后识别角色、道具和机位,插入导演台作为构图参考起点,仍需手动微调位置和角度后才能生成不同视角的预演。
Q4:预演视频可以直接当成片发布吗?
不可以。预演视频是白模或简模渲染的空间参考,画面质量不满足发布标准。它的用途是作为分镜参考进入生成链路,由视频模型渲染为正式画面后,再衔接剪映完成精剪、字幕和包装,最终由创作者发布。
Sources
- 央广网 - Seedance 2.5新增白模、绿幕参考能力,最多支持50个多模态参考素材