开年王炸,OpenAI 视频颠覆模型 Sora

chatgpt中文网2024-02-20364

chatgpt 欢迎访问chatgpt中文教程网,学习chatgpt相关知识,以下是正文内容:

前 言

假还没放够就开工了!不过日子总要往前走的嘛!

听雨在这里祝大家在新的一年里身体健康、家庭和睦、工作顺利、财源广进!

本来是不打算写 Sora 的,主要是 Sora 作为产品本身并没有发布,也没有公布发布日期,除了特定的人员(申请要求非常严苛,国内基本没戏,谨防被割韭菜),现在只能去推特山姆奥特曼那里留言等着被选中生成,所以大家现在还没有办法愉快的玩耍哦。

但是呢,大家应该都知道放长假的后遗症,回归以后的第一件事情是三问:我是谁?我在哪?我要干什么?着实是没有那么快回归状态!

然后,这几天被 Sora 刷屏了,这个热度的确是有点高,那还是要蹭一下的!

好了,闲话少说,我们直接开整。

最近关于 Sora 的科普应该很多,听雨这里就简单的再介绍一下:


Sora 是由 OpenAI 开发的文生视频模型。它可以根据文本生成高质量的视频,也可以对已有的视频进行扩展和编辑。


以上的介绍感觉和 pika、runway 这些 AI 视频工具也没啥区别嘛!


那就需要提一提 Sora 的三个碾压级的特色了:


特色一:可以一次性生成 60s 的超长视频,而且是遵循提示词的连贯稳定的 60s 视频哦!


特色二:多角度镜头,可以在单视频中包含多个角度的镜头,并且保持人物背景的一致性!


特色三:世界模型,让 AI 理解并模拟动态的物理世界,对物理世界的规则进行复刻,在 AI 视频中重构真实的世界!


上一段官方的宣传视频:

Prompt: A stylish woman walks down a Tokyo street filled with warm glowing neon and animated city signage. She wears a black leather jacket, a long red dress, and black boots, and carries a black purse. She wears sunglasses and red lipstick. She walks confidently and casually. The street is damp and reflective, creating a mirror effect of the colorful lights. Many pedestrians walk about.

提示词:一位时尚的女士走在东京的街道上,街道上充满了温暖的霓虹灯和生动的城市标志。她穿着黑色皮夹克、红色长裙和黑色靴子,手里拿着一个黑色钱包。她戴着太阳镜和红色口红。她走路自信而随意。街道潮湿且反光,形成了彩色灯光的镜面效果。许多行人走来走去。


可以看到视频不仅保持了人物的一致性,而且背景也是相当稳定,视频中还展现了不同角度,近景远景的转换也是相当丝滑,视频背景中的人群也完全没有走样!运动幅度也是相当的大,这才是真的视频生成啊!


再贴两个官方的视频例子,更多的官方例子可以去官网查看哦:

https://openai.com/sora

Prompt: Drone view of waves crashing against the rugged cliffs along Big Sur’s garay point beach. The crashing blue waters create white-tipped waves, while the golden light of the setting sun illuminates the rocky shore. A small island with a lighthouse sits in the distance, and green shrubbery covers the cliff’s edge. The steep drop from the road down to the beach is a dramatic feat, with the cliff’s edges jutting out over the sea. This is a view that captures the raw beauty of the coast and the rugged landscape of the Pacific Coast Highway.

提示词:在大苏尔的garay角海滩上,海浪拍打着崎岖的悬崖,无人机尽收眼底。汹涌的蓝色海水形成了白色的波浪,而落日的金色光芒照亮了岩石海岸。远处坐落着一个带灯塔的小岛,绿色的灌木林覆盖着悬崖边缘。从公路到海滩的陡峭落差是一个戏剧性的壮举,悬崖的边缘伸出大海。这是一个捕捉到海岸原始美景和太平洋海岸公路崎岖景观的视图。

这个完全就是航拍的感觉有么有!相当真实!


Prompt: Photorealistic closeup video of two pirate ships battling each other as they sail inside a cup of coffee.

提示词:两艘海盗船在一杯咖啡里航行时相互打斗的逼真特写视频。

虽然现实中不存在这样的场景,但是也是相当真实!


两艘船能够在保持距离的同时进行动态航行,逼真的光影效果,它还模拟了咖啡流体的动力学效果,包括船只周围形成的泡沫。这就是个物理模拟引擎啊!


同时 Sora 还可以根据我们的描述同时生成多个视频。



Sora 还可以生成涉及一系列事件的故事线。


在以下这段视频中,要求金毛猎犬和萨摩耶犬穿过纽约,然后出租车停下来让狗通过人行横道,然后它们应该走过椒盐卷饼和热狗摊,最后它们应该看到百老汇的标志。


不仅根据提示生成了多个系列事件的故事线,视频中的这俩犬还有互动,你敢信?


以后生成小视频不是信手拈来,还要啥自行车?



我们继续分享一些网络上用 Sora 创建的有趣视频:


相机降低并扩大到一个宏伟的全景,俯瞰美丽的海洋和历史建筑,沿着一个令人惊叹的沿海风景如画的小镇坐落在悬崖上:



一只大鸭子走过波士顿的街道:



一片叶子的宏观照片,显示微小的火车在其静脉中移动:



再来个动物园:



这个就是动物世界跟踪镜头的既视感吧,相当真实了:



相当震撼有么有?完全不亚于 GPT-4 刚出来时候的震撼!AI 视频领域说变天就变天了,Sora 一出,AI 视频落地应用的时代说来就来了!


对 Sora 视频模型原理感兴趣的小伙伴可以看以下这篇文章:

https://openai.com/research/video-generation-models-as-world-simulators


今天的分享就到这里喽!Sora 真的值得我们期待一下!



听雨创建了一个知识星球,里面会分享一些 AI 相关的信息,感兴趣的小伙伴可以扫码免费加入哦!



如果觉得不错,可以随手点个赞、在看、转发三连,如果想第一时间收到推送,也可以设个星标⭐~感谢

本文链接:http://xiaogongchang.cn/chatgpt/1058.html

相关文章