跳转至

游戏与交互式娱乐

最后更新: 2026-04-16 | 深度调研

GameNGen: 第一个神经网络游戏引擎

论文: arXiv:2408.14837 (Google, ICLR 2025)

将 DOOM 游戏引擎完全用扩散模型替代，单 TPU 20FPS 实时交互。

Phase 1: PPO 数据采集

  • 网络: 简单 CNN (Stable Baselines 3, CPU)

  • 并行环境: 8 个, Replay Buffer 512/env

  • 总步数: 10M, 学习率 1e-4, 熵系数 0.1

Phase 2: 扩散模型训练

  • 基于 Stable Diffusion v1.4 改造

  • 移除 CLIP 文本条件, 替换为动作嵌入 A_emb

  • 历史帧沿通道维度拼接到噪声潜码

  • 使用 v-prediction (非 ε-prediction)

  • CFG weight = 1.5 (观测条件)

噪声增强历史帧 (抗漂移关键)

  • 训练时对历史帧添加 Gaussian 噪声, σ ~ Uniform(0, 0.7)

  • 离散化为 0-9 档, 噪声级别嵌入作为模型输入

  • 让模型学会"从带噪历史帧中纠偏"

性能指标

  • PSNR (Teacher-Forcing): 29.43

  • LPIPS: 0.249

  • FVD (16帧): 114.02 / FVD (32帧): 186.23

  • 推理: 50ms/帧 = 20 FPS (单 TPU, 4步去噪)

  • 人类可辨率 (1.6s): 58% (仅略好于随机猜测!)

  • 人类可辨率 (3.2s): 60%

Oasis: 实时可玩的开放世界 AI

发布: Decart + Etched, 2024.10

架构

  • 空间自编码器 (ViT-based): 游戏帧 → 潜码

  • 扩散骨干 (DiT-based, 500M 参数): 键盘输入 → 预测下一帧

Diffusion Forcing (核心范式)

  • 标准扩散: 所有 token 同一噪声级别 t

  • Diffusion Forcing: per-token 独立采样不同噪声级别

  • 支持灵活序列长度, 多种解码策略

Etched Sohu ASIC

  • 专为 Transformer 推理优化的 ASIC 芯片

  • 目标: 100B+ 参数在 4K 分辨率实时运行

  • 公开的 500M 是 downscaled 版

Dreamer V4: 纯离线解决 Minecraft Diamond

论文: arXiv:2509.24527 (DeepMind, 2025.09)

核心突破

  • 首个仅从离线数据(无环境交互)获取钻石的智能体

  • 需要 >20,000 步鼠标键盘动作序列

  • 数据: VPT 数据集 2541 小时, 仅少量有动作标注

三阶段训练

  • Stage 1: 世界模型预训练 (2541h 无标注视频, Shortcut Forcing)

  • Stage 2: 任务适配 (插入 Policy/Value/Reward Head)

  • Stage 3: 想象力 RL (完全在世界模型内部, <300K agent steps)

性能

  • 获钻成功率: 0.7% (首个纯离线成功)

  • 数据效率: 比 VPT 高 100×

  • 推理: 21 FPS (单 H100)

  • 子任务: 14/16 完成 (vs Oasis 0-2/16)

Genie 3: 通用世界模型游戏引擎

发布: Google DeepMind, 2025.08

  • 参数: 11B 自回归 Transformer

  • 分辨率: 720p (1280×720)

  • 帧率: 24 FPS 实时

  • 记忆: ~1 分钟场景一致性

  • 训练: 数十亿帧游戏画面

  • 输入: 文本/图像/草图 → 可交互 3D 世界

  • 用途: Waymo World Model 骨干 / 机器人 sim2real 场景生成

AI Native Game: 未来游戏范式

概念

传统: 开发者写规则/关卡 → 引擎执行 → 玩家体验

AI Native: 训练数据 → 世界模型 → 玩家输入 → 实时生成, 无限变化

工业落地

  • Iconic (英国): $13M 种子轮 (2025.12), 语音驱动 AI 原生游戏

  • Hidden Door (美国): $7M, 叙事多元宇宙 NPC

  • Inworld AI: $150M+, AI NPC 工具链

  • Decart + Etched: Oasis 商业化

市场数据

  • Steam AI 游戏: 7300+ 款 (2025, 较2024翻倍)

  • ~50% 游戏工作室积极使用 AI (BCG 2026)

  • AI 使能企业首轮估值: 比非 AI 高 2.5×

参考

↑ 上级 · 05 应用领域深度分析