OpenAI Sora对游戏行业影响最大

OpenAI推出通过文本生成视频的Sora,秒杀pika等现有视频生成AI,以下是推友讨论:

1、OpenAI Sora是一个数据驱动的物理引擎
如果你认为OpenAI Sora是一个像DALLE一样的创意玩具? 请再想想。Sora是一个数据驱动的物理引擎。它是许多世界的模拟,真实的或幻想的。模拟器学习复杂的渲染,“直观”的物理学,长视野推理和语义基础。

OpenAI Sora是一个端到端的扩散变换器模型。它直接输入文本/图像并输出视频像素。

Sora 通过海量视频,以梯度下降的方式在神经参数中隐含地学习物理引擎。

Sora 是一个可学习的模拟器,或称 "世界模型"。当然,它不会在循环中明确调用 UE5,但有可能将 UE5 生成的(文本、视频)对作为合成数据添加到训练集中。

2、Sora的推理管道

  • 基于CLIP
  • 文本到3D对象
  • 3D对象到装备/路径 
  • 游戏引擎中的对象+装备+路径 
  • 游戏引擎模拟 
  • 捕获模拟作为视频扩散模型的输入,该模型可以访问前面的许多帧 


3、Sora从头开始构建Minecraft
我从来没有想过OpenAI会成为下一个游戏引擎,但现在我不再那么确定了。OAI自己说这只是一个视频传播模型。训练过程/数据收集def使用游戏引擎。

人们现在都认为Sora对好莱坞电影影响大,但实际上认为它对视频游戏开发具有更大的影响,至少在不久的将来,它对游戏行业的打击将比对电影行业的打击更大。

我可以想象,在未来的游戏开发过程中,你只需向人工智能描述一个大致的轮廓,然后让它生成一个可玩的初始版本,你只需继续玩下去,同时给它反馈和意见,让它动态地改变。

然后,人工智能会维护一种游戏定义文件,用来保持机制、风格、情节等的一致性,同时在玩家与之互动时填补空白。

因此,作为游戏开发者,你只需不停地玩这个东西,并指导人工智能如何调整它,当你对它足够满意时,你就可以与其他人共享该游戏文件,他们就可以始终如一地体验同样的游戏,甚至可以根据自己的喜好随意调整。