OpenAI|全网为Sora疯狂!

前言

大家好,我是陈同学,感谢各位的点赞、收藏、评论

2月16日凌晨OpenAI发布了文本生成视频的新应用模型Sora

官方出品必属精品!

Link:openai.com/sora

本文阅读成本与收益如下:

阅读耗时:3mins

预期效益

  • 认识Sora
  • 了解Sora的不足
  • 如何体验Sora的能力
  • Sora技术原理分析报告

认识SORA

Sora是OpenAI首个视频生成模型,拥有与DALL·E 3的画面质量以及指令能力

Sora 在日语中意为天空,之所以选择这个名字,是希望它能激起无限的创造潜力。

该模型可以帮助用户通过简单的文本描述视频中的内容,即可在短时间内得到一个分钟级别的视频素材

官方给出来不少prompt生成视频的例子:

  • 一位富有气质的女生走在人来人往的街道上:视频呈现的效果如同真实摄像机拍摄得到,镜头距离人物由远到静,甚至可以生成人物的细节,模拟特写效果
  • 生成一段加州淘金热时期的历史录像:视频画质稍带历史年代感的模糊效果,内容方面模拟了古代村落的景观
  • ......

当然还有非常多的例子,这里不一一列举,感兴趣的小伙伴执行查看官网的视频~

总的来说 Sora 能够生成具有多个角色、特定运动类型以及主题和背景的准确细节的复杂场景,并具有以下特性

  • 理解用户在提示中所要求的内容,而且还理解这些事物在物理世界中的存在方式。
  • 对语言有着深刻的理解,使其能够准确地解释提示,并生成令人信服的字符
  • 能够表达充满活力的情感
  • 在一个生成的视频中创建多个镜头,以准确地保存字符和视觉风格

了解Sora的不足

Sora目前存在明显弱点,可能难以非常准确保证模拟复杂场景的物理过程,也可能无法理解因果关系的具体实例。比如:一个人可能咬了一口饼干,但之后饼干上可能没有咬痕。

该模型还可能混淆提示的空间细节,例如:混淆左右,并可能难以准确描述随着时间发生的事件,比如跟随特定的摄像头轨迹。

例子:

  • 步进打印一个人奔跑的场景,电影胶片拍摄在35毫米。(制造出身体上令人难以置信的动作:人在跑步机上的跑步方向不寻常)
  • 五只灰狼幼崽在一条偏远的砾石路上嬉戏,相互追逐,周围是草。幼崽们奔跑跳跃,互相追逐,相互咬咬,嬉戏。(制作了一段动物不断增加的视频:狼的数量会变化,一些凭空出现或消失)

如何体验Sora的能力

暂时还没收到官方的邀请,有兴趣的小伙伴可以一起蹲一下哈

感受

从22年的ChatGPT、midjourney的模型生文生图,到今天的视频生成的只用了短短的一年时间,这一年以来关于人工智能的各种出圈都非常让人震惊,仿佛每隔几个月都开始科技圈 / 技术圈的一次盛宴,AIGC带来的能力逐渐从台后来到台前帮助人们更好的工作与生活,未来内容生成的应用将会更加的广泛。

参考

讲到最后

2024新年假期接近尾声,准备上班了,写篇文章热热身,争取2024持续输出内容~

相关推荐
謓泽1 天前
【插件】用写网页的方式做视频?HyperFrames 让我重新理解了“做视频“这件事!
gpt·ai·大模型·音视频·媒体·claude·视频
一缕82年的清风3 天前
7 美元芯片如何给 AI 挂上“物理手眼”?从 AirPlay 视讯流到 USB HID 物理注入的真实硬件黑客流
gpt·claude
敢敢のwings3 天前
用 GPT‑6 构建可交互 USD 资产:从 USDCraft 到一扇能用于仿真的柜门
gpt
七牛云行业应用4 天前
MIT “权重空间编程”:GPT-6 Astra 修改 0.016% 的 Qwen 权重,MATH-500 从 7.9% 升至 48.1%
人工智能·gpt·ai
一缕82年的清风5 天前
智能体“自适应慢思考”的算力黑洞:当 Claude 5.5 与 GPT-6.1 Sol 陷入推理自旋,为什么高并发架构必须重构“认知预算熔断与快慢推测执行”?
gpt·claude·gemini
AI 编程助手GPT6 天前
GPT 排的日志时间线差一小时?用 zoneinfo 复现夏令时回拨
人工智能·python·gpt
阿愚先生6 天前
【从零手写GPT(一)】:RTX 5080 环境踩坑,我装错了两次 PyTorch
人工智能·pytorch·gpt
一缕82年的清风6 天前
智能体“自主决策”的虚假繁荣:当 Claude 5.5 与 GPT-6.1 深入生产,为什么顶级架构师都在重回“确定性状态机”?
gpt·claude
AI 编程助手GPT6 天前
GPT 改完配置别直接覆盖:用 git diff 审查两份文件
git·gpt
一缕82年的清风7 天前
算力平民化神话破产:当推理成本暴降 90%,为什么生产级 Agentic 架构反而更贵更脆弱了?
gpt·claude