Genie 谷歌GoogleGenie精灵世界大模型发布，理解物理理解空间

Genie 是一款由 Google AI 开发的生成式交互环境模型，可以从合成图像、照片甚至草图中生成各种可玩世界。该模型基于互联网视频进行训练，能够学习如何控制环境中的对象并与之交互。目前和和Sora一样外界不可访问，只能看到一些初步的示例，甚至比Sora还要早期。





更多的展示内容为游戏类视频，也着重在游戏上面进行描述更多。

Genie 的工作原理

Genie 使用一种称为“无监督学习”的技术进行训练。这意味着它不需要任何人工标注数据，而是从互联网视频中学习如何控制环境中的对象。




Genie 的训练数据集包含了大量的 2D 平台游戏和机器人视频。通过分析这些视频，Genie 可以学习到哪些对象是可以控制的，以及如何控制它们。

Genie 的功能

Genie 可以生成各种类型的可玩世界，包括：

• 2D 平台游戏世界
• 3D 迷宫
• 虚拟城市
• 其他任何你能想象到的世界
  

Genie 还能够根据用户的输入生成定制化的世界。例如，你可以输入一张照片或一张草图，Genie 就会根据你的输入生成一个可玩的世界。

Genie 的应用

Genie 可以用于各种应用，包括：

• 游戏开发
• 教育
• 娱乐
• 虚拟现实
• Genie 的未来
  

Genie 是一项仍在开发中的技术。Google AI 正在研究如何改进 Genie 的性能和功能，并将其应用于更广泛的领域。

以下是一些 Genie 生成的可玩世界示例：

2D 平台游戏世界: https://store.steampowered.com/app/2342210/GENIE/
3D 迷宫: https://www.youtube.com/watch?v=QzTISx91HOI
虚拟城市:https://www.g5.com/games/virtual-city-playground

版主总结

Genie 是一款具有巨大潜力的生成式交互环境模型。它可以生成各种可玩世界，并具有广泛的应用前景。


其他资源

Genie 官方网站: https://sites.google.com/view/genie-2024/
Genie 论文: https://arxiv.org/abs/2302.07915