小模型「扛」住自由运镜:InSpatio-World 开源实时 4D 模拟器

玩过 4D 新视角合成的人,经常遇到这样的困境:传统模型视角稍偏就画面撕裂,时序一拉长就闪烁崩坏,渲染更是等到天荒地老,而且很多模型过于庞大,显卡根本跑不动,只能对着云端排队干瞪眼。

**InSpatio 团队开源的 InSpatio-World 一次性解决了这 4 个麻烦。**它基于 Wan2.1-T2V-1.3B 深度后训练,不是盲目堆参数,而是用时空自回归建模做了一次「4D 推演特训」,虽然只有 1.3B 的轻量身板,却以单次前向分块方式持续推演,让视频生成从「开盲盒」变成「自己扛摄像机」。

**而且 InSpatio-World 支持精确的相机轨迹控制:**通过轨迹文件定义俯仰、偏航与位移,轨道环绕、Dolly Zoom、Time Freeze。这些原本需要专业团队拍摄的镜头语言,现在一条轨迹文件就能搞定。上传一段视频,定义一条轨迹,剩下的交给自回归框架逐步推演。最关键的是他还能做到长时序稳定,无需复杂提示词工程,不用搭建冗长管线,所见即所得的 4D 世界模拟轻松搞定!

教程链接: https://go.openbayes.com/cAvcc 使用云平台: OpenBayes http://openbayes.com/console/signup?r=sony_0m6v

首先点击「公共教程」,找到「InSpatio-World:实时 4D 世界模拟器」,单击打开。

页面跳转后,点击右上角「克隆」,将该教程克隆至自己的容器中。

在当前页面中看到的算力资源均可以在平台一键选择使用。平台会默认选配好原教程所使用的算力资源、镜像版本,不需要再进行手动选择。点击「继续执行」,等待分配资源。

等待分配资源,当状态变为「运行中」后,点击「打开工作空间」进入 Jupyter Workspace。

页面跳转后,点击左侧 README.ipynb 文件。

点击运行,运行完毕后,Notebook 输出中会出现可点击的 public URL,大家也可以点击工作空间右侧 API 地址进入 Demo 页面。

点击右侧 API 地址即可打开 Demo 界面。

效果展示:

相关推荐
skywalk81638 小时前
光明语言入榜计划:GitHub Linguist 注册指南・光明语言模块参考
人工智能·编程·光明
天空鸟_时光不老8 小时前
07-检查点与状态持久化
java·人工智能·spring boot·spring·spring cloud·kafka·maven
Latchh8 小时前
PDF打开不要密码却显示已加密,前端怎么判断
前端·图像处理·人工智能·计算机视觉·pdf
thinking_talk8 小时前
企业AI记忆产品科学选型框架
人工智能·机器学习·ai记忆
卿卿的产品经理日记8 小时前
【AI产品经理实战】Day 33|计算机科学速成:从巴贝奇到“AI是围墙“
人工智能·aigc·产品经理
桃西西呀8 小时前
Spring AI Alibaba 之三:graph-core 状态图引擎深拆
人工智能·spring·llm
mit6.8248 小时前
乔布斯1983年对ai的预测
人工智能
原子延迟8 小时前
PDF权限密码和打开密码差在哪?我拿7份文件试了
图像处理·人工智能·计算机视觉·pdf
丁希希哇8 小时前
强化学习与偏好学习基础:PPO,DPO,GRPO
人工智能·学习·机器学习·大语言模型
richard_yuu8 小时前
OpenCV 实战第 7 篇:Canny 阈值自适配、findContours 层级与 approxPolyDP
人工智能·opencv·计算机视觉