一、Sora什么来头？对我们有什么影响？
2024年2月15日凌晨，OpenAI发布文生视频大模型：Sora。
据说强到，能震惊人一万年的程度。https://openai.com/sora
简单来说就是，AI视频要变天了！
如果要用三个词来总结Sora，那就是“60s超长长度”、“单视频多角度镜头”和“世界模型”
1.1 官方效果视频
1.2 竞品分析
Sora和 Runway、Pika、SVD同一段提示词的对比，来看看效果：
1.3 正式认识一下Sora
如果你以为这个Sora只是类似DALL E的小插件，那可就大错特错了，让我们来好好认识一下Sora
📌
Sora实际上是一个基于数据的物理模拟引擎。它能够模拟各种各样的世界，不管是真实的还是幻想中的。通过一系列复杂的计算过程，比如去噪技术和梯度计算，这个模拟器能够学习到如何进行精细的渲染、模拟直观物理效果、进行长期的逻辑推理，以及实现语义理解。
Sora来了，我们离AI模拟世界还有多远
如果说Sora是依赖使用Unreal Engine 5生成的大量合成数据进行训练，我一点都不会觉得意外。因为它的确需要这样做！
我们来分析一段视频。
视频提示是：“在一杯咖啡中航行的两艘海盗船进行战斗的逼真特写镜头。”
• 模拟器创建了两艘装饰各异的精美3D海盗船模型。Sora需要在其内部空间隐式地完成从文本描述到3D模型的转换。
• 这些3D模型能够在保持彼此距离的同时进行动态航行。
• 它还模拟了咖啡流体的动力学效果，包括船只周围形成的泡沫。值得一提的是，流体模拟本身就是计算机图形学中一个非常复杂的分支，需要依赖复杂的算法和方程式。
• 视频达到了近乎逼真的光影效果，仿佛是采用了光线追踪技术进行渲染。
• 考虑到杯子相比海洋的小尺寸，模拟器还采用了移轴摄影技术，营造出了一种微观世界的视觉感受。
• 虽然视频中的场景在现实世界中并不存在，但这个引擎还是按照我们所期望的物理规则正确地实现了场景模拟。
📌
下一步是增加更多的输入模式和条件设置，我们就能得到一个全面的数据驱动的虚拟引擎，它将有望取代所有传统手工编制的图形处理流程。
二、提示词库
Prompt 1
several giant wooly mammoths approach treading through a snowy meadow, their long wooly fur lightly blows in the wind as they walk, snow covered trees and dramatic snow capped mountains in the distance, mid afternoon light with wispy clouds and a sun high in the distance creates a warm glow, the low camera view is stunning capturing the large furry mammal with beautiful photography, depth of field.
提示：
几只巨大的毛茸茸的猛犸象踩着白雪皑皑的草地走近，它们长长的毛茸茸的毛毛在风中轻轻吹拂，远处白雪皑皑的树木和壮观的白雪皑皑的山脉，午后的光线与薄薄的云层和远处高高的太阳营造出温暖的光芒，低相机视角令人惊叹，用美丽的摄影捕捉了大型毛茸茸的哺乳动物，景深。
牛的一批啊！60s，一镜到底，而且不止主人物稳定，连特么背景里面的人物，都稳定的难以置信从大中景无缝切换到脸部特写。
Prompt 2
A beautiful silhouette animation shows a wolf howling at the moon, feeling lonely, until itfinds its pack.
提示:
一个美丽的剪影动画展示了一只狼对着月亮嚎叫，感到孤独，直到它找到狼群。
在一分钟的镜头里，实现了多角度的镜头切换...而且...物体一致...而且，多镜头，无缝切换，而且每一个分镜，都用的极其讲究！
Prompt 3
A Chinese Lunar New Year celebration video with Chinese Dragon.
提示:与中国龙一起庆祝中国农历新年的视频。
Prompt 4
A stylish woman walks down a Tokyo street filled with warm glowing neon and animatedcity signage. She wears a black leather jacket, a long red dress, and black boots, and carries a blackpurse. She wears sunglasses and red lipstick. She walks confidently and casually. The street is dampand reflective, creating a mirror effect of the colorful lights. Many pedestrians walk about.
提示：
一位时尚女性走在充满温暖霓虹灯和动画城市标牌的东京街道上。她穿着黑色皮夹克、红色长裙和黑色靴子，拎着黑色钱包。她戴着太阳镜，涂着红色口红。她走路自信又随意。街道潮湿且反光，在彩色灯光的照射下形成镜面效果。许多行人走来走去。
Prompt ......
大家想紧跟AI时代浪潮，可以添加小石vx: aaxiaoshi666获取一手AI资讯和AI项目实战，另外可以关注小石的知识星球一起学习AI。
三、Sora拆解大全
1、360周鸿祎对视频大模型 sora 的理解
四、Sora可能给我们带来的影响
📌
如果Sora能够真正意义上实现文生视频，可能会带来哪些影响呢？
This content is only supported in a Feishu Docs
影响 | 说明 |
视频创作的民主化 | Sora可以让普通人只需输入文本即可生成高质量视频，降低了视频创作的门槛，使得视频创作更加民主化 |
文化多元化的促进 | Sora可以根据不同语言、文化和风格的文本指令生成视频，打破语言和文化壁垒，让世界变得更加多元化 |
违法犯罪的风险 | Sora可能会有不法分子利用这项技术实施新手段的违法犯罪，例如制作虚假的视频证据，或者侵犯他人的肖像权和隐私权 |
影视行业的冲击 | Sora可能会对影视行业，特别是特效行业，造成巨大的冲击，使用AI来制作一些特效和高风险的镜头，可以大幅降低拍摄成本，也可以避免很多危险 |
虚拟偶像的催生 | Sora可能会催生出真正的“虚拟偶像”，没有演员的影视作品出现，对演员来说是个小挑战，同时也会利好编剧行 |
不过，从Sora官网目前展示的视频画面效果来看，效果还没那么逼近真实，
短期内不会产生让行业失业，但会有辅助作用，做个动画片应该问题不大。
在Sora官网，OpenAI表示，Sora是能够理解和模拟现实世界的模型的基础，OpenAI相信这一能力将是实现AGI的重要里程碑。
至于Sora文生视频到底能带来多大影响，会不会翻车，还需要“让子弹飞一会儿。
感谢大家阅读到最后，觉得本文有帮助，可以点一个 赞+在看 分享给更多需要的人。2024一起成长，学习AI。
网友评论