腾讯联合几所大学共同推出首个面向3A开放世界游戏的大模型GameGen-O，可以通过模拟各类3A游戏里的角色、动态环境、复杂动作和多样化事件，从而生成高质量的游戏场景。

据介绍，GameGen-O的开发涉及从头开始的全面数据收集和处理工作。团队收集并构建了第一个开放世界视频游戏数据集（OGameData），从100多个下一代开放世界游戏中收集了大量数据。

之后经历了两阶段的训练过程，包括基础模型预训练和指令调整。在第一阶段，模型通过文本到视频和视频延续对OGameData进行预训练，赋予GameGen-O开放领域视频游戏生成的能力。在第二阶段，预训练模型被冻结，使用可训练的InstructNet进行微调，这使得可以根据多模态结构指令生成后续帧。这一整个训练过程赋予了模型生成和交互式控制内容的能力。

GameGen-O的推出是通过生成模型在开放世界视频游戏生成领域迈出的显著的第一步，强调了生成模型作为渲染技术的替代品的潜力，可以有效地结合创造性生成和交互能力。这个模型对研究者和开发者而言都非常有用，可以探索视频游戏AI开发、互动控制和沉浸式虚拟环境等多种应用。