相关链接:

核心技术原理

Oasis与传统游戏有着本质区别。传统游戏(如《我的世界》)依靠数万行代码、物理引擎和预设的游戏资产来运行。而Oasis没有任何代码,它是一个端到端的神经网络。

  • 扩散Transformer架构: Oasis基于扩散Transformer(Diffusion Transformer, DiT)架构。它包含两个主要部分:一个基于ViT的”空间自编码器”(Spatial Autoencoder)和一个”潜在扩散主干”(Latent Diffusion Backbone)。

  • 自回归生成: 模型以自回归的方式生成每一帧图像。它会根据用户的键盘/鼠标输入以及之前的视频帧,实时预测并渲染出下一帧。

  • Diffusion Forcing技术: 开发者使用了一种名为”Diffusion Forcing”的训练技术,使模型能在长序列生成中保持时空一致性,从而模拟出重力、碰撞和地形变化等物理规律。

硬件与性能

Oasis的诞生离不开定制硬件的支持,这也是Etched公司的核心竞争力。

  • Sohu芯片: Oasis针对Etched开发的”Sohu”芯片进行了深度优化。Sohu是世界上首款专为Transformer模型设计的ASIC(专用集成电路)。

  • 效率优势: 据Etched声称,运行Transformer模型时,单个Sohu服务器的性能可等同于160块NVIDIA H100 GPU。这种硬件级别的支持让实时生成高清、低延迟的AI视频成为可能。

  • 当前表现: 目前的公开演示版在NVIDIA H100上能以约20 FPS的帧率运行,分辨率约为360p或460p。

主要功能与特色

  • 完全交互性: 玩家可以移动、跳跃、破坏方块、收集物品,这些行为会即时改变后续生成的画面。

  • 无限生成: 理论上,玩家可以向任何方向探索,世界会根据AI的”联想”无限延伸。

  • 自定义世界(Custom Worlds): 用户可以上传一张图片,Oasis会基于这张图片的内容生成一个可玩的游戏世界。

  • 开源贡献: 开发者已在Hugging Face上开源了Oasis 500M(5亿参数)模型的权重和推理代码。

现状与局限性

虽然Oasis令人惊叹,但它仍处于早期实验阶段:

  • 缺乏”物体持久性”(Object Permanence): 由于完全依赖概率预测,当你转身后再转回来,刚才看到的景物可能会发生变化(消失或变形)。

  • 物理规律偶尔失效: AI有时会产生”幻觉”,导致方块浮空、地面突然塌陷或物理反馈不符合直觉。

  • 分辨率与时长限制: 目前的分辨率较低,且长时间游玩后画面的一致性会逐渐崩溃。

行业意义

Oasis展示了一种**“视频模型即游戏引擎”**的可能性。在未来,开发者可能不再需要编写复杂的物理模拟或图形渲染代码,只需通过大规模视频数据训练模型,就能创造出极具沉浸感且每个玩家都完全不同的动态世界。