Overview
产品概述
GameNGen 是首个完全由神经模型驱动的游戏引擎，支持与复杂环境的实时交互。它通过两阶段训练：先由 RL 智能体玩游戏并记录训练过程，再训练扩散模型根据过去的帧和动作预测下一帧。在单个 TPU 上可达到超过 20 FPS 的交互式模拟速度，下一帧预测的 PSNR 达到 29.4，与有损 JPEG 压缩相当。人类评估者区分真实游戏片段与模拟片段的能力仅略高于随机水平。
Capabilities
核心能力
实时交互式游戏模拟
GameNGen 能够在单个 TPU 上以超过 20 FPS 的速度实时模拟经典游戏 DOOM，实现与复杂环境的交互。
高保真下一帧预测
下一帧预测的 PSNR 达到 29.4，与有损 JPEG 压缩相当；人类评估者区分真实与模拟片段的准确率仅略高于随机。
两阶段训练方法
采用两阶段训练：先由 RL 智能体自动玩游戏并记录数据，再训练扩散模型基于过去帧和动作生成下一帧。
Use Cases
适用场景
-
01
游戏 AI 研究
研究纯神经模型能否作为实时游戏引擎运行，为未来游戏生成和世界模型提供参考。
-
02
DOOM 模拟
可以实时模拟经典游戏 DOOM 的完整玩法，生成游戏画面。
Integrations
集成能力
Stable Diffusion v1.4
GameNGen 重新利用了 Stable Diffusion v1.4 作为扩散模型骨干，并针对游戏帧生成进行了改进。
