画布和3D导演台工具:短剧分镜从素材整理到空间预演的完整链路

做短剧分镜时最常遇到的卡点有两类:一是角色图、场景图、镜头脚本散落各处,每次生成前都要重新翻找和对齐;二是多人站位、遮挡关系和运镜轨迹很难用纯文字描述清楚,生成结果反复偏离预期。画布解决的是第一类问题------把角色、场景、道具、音频等素材集中管理并通过节点连线表达引用关系;3D导演台解决的是第二类问题------在三维空间里摆好角色和机位,截图或录制动态参考后再送回画布进入生成链路。小云雀 AI 的短剧 Agent 将这两者串联为连续工作流:画布负责组织资产和接收预演产物,3D导演台负责空间摆位、动作编排和镜头设计。本文以一个三人对峙场景为例,走通从新建画布节点到输出分镜参考的完整流程。

画布:把散乱素材变成可引用的资产节点

画布的核心作用是将角色、场景、道具、文本、音频、图片和视频六类素材集中到一张可视化工作区。每个素材以节点形式存在,节点之间用连线表达引用关系。角色节点可保存字段和参考图,场景节点可绑定全景图,这些资产一旦进入画布就能在故事板中通过 @ 直接调用,不必每镜重复描述。

本文示例项目是一部都市悬疑短剧的第三集片段:女主在废弃仓库与两名对手对峙,需要三个机位、一段走位和一次镜头推近。进入画布后先完成以下准备:

  • 创建角色节点:女主正侧背三视图,锁定身份与服装基准;两名对手各一张正面参考图。
  • 创建场景节点:仓库720°全景图,锁定空间布局与光向。
  • 创建文本节点:本段剧本摘要和对白时间线。

这些节点建立后,后续在3D导演台和故事板中都能直接引用,避免每次生成时重新上传或重复描述。

3D导演台:从空间摆位到动态参考的操作顺序

3D导演台用于在三维空间中放置角色和道具模型,调整站位、姿势与机位,最终截图或录制动态参考视频发送回画布。它适合多人站位、遮挡关系复杂、同场景需要多机位的镜头。预演产物是分镜参考,不是最终成片------最终画面仍需将参考素材与角色图、场景图和提示词一起送入生成链路。

本文示例项目按以下顺序操作:

步骤 操作 产物 检查点
定空间 用仓库全景图作为3D背景,放入三个角色模型,调整站位和朝向 空间布局截图 三人间距合理,无穿模
定运动 为女主绘制3D轨迹(从左侧向右前方移动),选择动作库中的""缓步逼近"" 可播放的动作预演 走位路径不穿过道具
定镜头 设置主机位:取景比例2.35:1,FOV 35°,注视点锁定女主面部 可复用的静态机位 主体无遮挡,视线方向与下一镜一致
定节奏 在时间轴插入关键帧,机位推近用Bezier插值,角色走位用Linear 动作与运镜预演视频 关键动作落在计划时长内
回画布 静态构图截图+动态参考视频发送回画布,连接角色图和场景图 进入生成链路的参考组 每类参考承担的约束明确

其中""定镜头""和""定节奏""是最容易出错的两个环节,展开说明:

定镜头时使用预设机位或从当前导演视角建立机位,设置取景比例、FOV和注视点,在机位实时预览中检查主体大小、遮挡和前后镜头的空间连续性。产物是可复用的静态机位,检查点是画面主体、空间关系和镜头意图是否一致。本例中主机位FOV设为35°以获得适度压缩感,突出三人对峙的紧张氛围。

定节奏时选中角色或机位后查看对象属性通道,在时间轴插入或移动关键帧。Bezier用于自然加减速,适合镜头推近;Linear用于匀速变化,适合角色匀速走位;Hold用于保持某个状态,适合定格瞬间。产物是可播放的动作与运镜预演,检查点是动作是否看清、镜头是否抢戏、结束状态能否接住下一镜。本例中女主走位4秒、镜头推近3秒,总共7秒预演时长,与剧本节奏吻合。

镜头配置与操作记录示例

以下JSON示例记录本例主机位的关键配置字段,用于团队内部对齐镜头意图:

bash 复制代码
{
""shot_id"": ""EP03_SC07_SH02"",
""framing_ratio"": ""2.35:1"",
""fov"": 35,
""look_at"": ""女主面部"",
""camera_movement"": ""缓慢推近"",
""interpolation"": ""Bezier"",
""duration_seconds"": 7,
""character_motion"": ""女主从画面左侧向右前方缓步移动"",
""character_interpolation"": ""Linear"",
""check"": ""主体无遮挡,视线方向与下一镜连续""
}

字段说明:framing_ratiofov 决定画面压缩感与空间纵深;look_at 是注视点,确保推近过程中主体始终在视觉中心;interpolation 区分镜头运动和角色运动各自的节奏曲线。验证方法:在导演台实时预览中逐帧播放,确认推近结束时女主面部占画面高度约60%,且两名对手仍在画面边缘可见。

以下是从新建节点到回画布的操作记录模板:

bash 复制代码
1. 在画布新建导演台节点,连接已建好的角色节点和场景节点
2. 定空间:导入仓库全景图作背景,放入三角色,调整站位间距约1.5米
→ 产物:空间布局截图;检查:无穿模、光向一致
3. 定运动:为女主绘制3D轨迹,应用""缓步逼近""动作,时长4秒
→ 产物:动作预演;检查:路径不穿越场景道具
4. 定镜头:建立主机位,取景2.35:1,FOV 35°,注视女主面部
→ 产物:静态机位截图;检查:主体大小合适、无遮挡
5. 定节奏:时间轴插入关键帧,机位推近Bezier 3秒,角色走位Linear 4秒
→ 产物:可播放预演视频;检查:结束状态能接住下一镜
6. 回画布:截图+动态参考发回画布,连接角色图、场景图,补充提示词
→ 产物:进入生成链路的参考组;检查:各参考职责不冲突

每一步的产物都是下一步的输入条件。如果第3步走位路径与道具冲突,应回到第2步调整空间布局后再继续,而不是在后续步骤中用提示词强行修正。

预演产物如何进入生成链路

导演台输出的是参考素材,不是最终视频。进入生成链路时需要明确每类素材的职责分工:

素材类型 职责 本例对应
白模/动态参考 锁站位、轨迹、运镜和节奏 导演台录制的7秒预演视频
角色图 锁主体身份、外形与关键结构 女主三视图、对手正面图
场景图 锁空间环境与光向 仓库720°全景图
提示词 补充时间线、禁止项和风格方向 文字描述对峙氛围与禁止穿帮

一份素材只承担一个主要职责。如果发现生成结果中角色站位偏离但外观正确,通常是白模参考与角色图职责混淆------应减少冲突素材或重新分工,而不是继续堆叠参考。Seedance 2.5已新增白模参考能力,最多支持50个多模态参考素材,可将白模预演渲染为画面写实的正式片段(央广网)。

本例中首次生成时,第三个镜头的对手站位出现了遮挡穿帮。使用片段重拍只重做该镜头,其余两个镜头保留,第二轮修正后通过验收。整段三个镜头耗时约40分钟,返工1次,返工率约33%。

常见问题(FAQ)

Q1:画布和3D导演台必须一起用吗?只用其中一个行不行?

可以单独使用,但组合使用效果更完整。画布单独使用时适合素材整理和故事板编辑;3D导演台单独使用时适合快速验证单个镜头的空间关系。小云雀 AI 的设计意图是让两者衔接:导演台产物发回画布后自动成为故事板节点的参考素材,减少手动传递。

Q2:固定机位的简单口播镜头需要进3D导演台吗?

不需要。3D导演台的价值在于处理多人调度、走位、遮挡和运镜轨迹这类""怎么拍""难以用文字讲清的镜头。固定机位口播或简单静物镜头直接用角色图和提示词生成即可,强行增加白模环节反而拉长流程。

Q3:AI识图转白模能完全复刻参考图的构图吗?

不能承诺完全复刻。AI识图转白模的作用是上传图片后识别角色、道具和机位,插入导演台作为构图参考起点,仍需手动微调位置和角度后才能生成不同视角的预演。

Q4:预演视频可以直接当成片发布吗?

不可以。预演视频是白模或简模渲染的空间参考,画面质量不满足发布标准。它的用途是作为分镜参考进入生成链路,由视频模型渲染为正式画面后,再衔接剪映完成精剪、字幕和包装,最终由创作者发布。

Sources

  • 央广网 - Seedance 2.5新增白模、绿幕参考能力,最多支持50个多模态参考素材
相关推荐
闲云野鹤在人间26 分钟前
KVM虚拟化实战|CentOS‑Stream8 两种安装方式+模板制作+基础使用
linux·运维·服务器·centos
小张同学a.26 分钟前
Docker 容器实战 2—— docker 仓库
linux·运维·服务器·docker·容器
专注仿真27 分钟前
TRAE Work 的实战
数据库·人工智能·分析
李蚊子30 分钟前
从代理提醒到真实响铃:懒熊闹钟的鸿蒙开发实践
前端·harmonyos
IT_陈寒37 分钟前
Redis的Lua脚本居然把我的集群搞崩了!
前端·人工智能·后端
Android系统攻城狮38 分钟前
Linux PipeWire深度解析之pw_core_get_registry调用流程与实战(九十一)
linux·运维·服务器·音频进阶·pipewire音频实战进阶
ACP广源盛1392462567340 分钟前
端侧 AI 硬件架构实践@ACP#中端边缘整机 PCIe 扩展与 IX7012 器件分析
大数据·数据库·人工智能·嵌入式硬件·开源·硬件架构
ACP广源盛1392462567341 分钟前
端侧 AI 硬件架构探讨@ACP#多外设高密度整机 PCIe 扩展与 IX7024 器件分析
大数据·数据库·人工智能·嵌入式硬件·开源·硬件架构
计算机魔术师42 分钟前
索尼与华纳起诉Anthropic,指控其大规模盗用版权音乐训练Claude
前端