GameFactory

GameFactory 是由香港大学与快手科技联合研发的一种创新框架，旨在解决游戏视频生成中的场景泛化问题。该框架基于预训练的视频扩散模型，结合开放域视频数据和小规模高质量的游戏数据集，通过多阶段训练策略，实现对游戏视频中动作的精确控制和多样化场景生成。 GameFactory 的核心功能包括强大的场景泛化能力、精准的动作控制、高质量的数据集支持以及交互式视频生成。其技术原理涵盖预训练视频扩散模型、三阶段训练策略、动作控制模块以及专门构建的 GF-Minecraft 数据集。GF-Minecraft 数据集包含70小时的《我的世界》游戏视频，具有丰富的场景和详细的动作标注，为动作可控的视频生成提供了坚实基础。 GameFactory 可广泛应用于游戏开发、内容创新、自动驾驶模拟及具身智能研究等领域，展示了其在生成式AI领域的广泛应用潜力。