摘要:全球首款 AI 实时生成游戏“oasis”开源,引发广泛关注。其基于 Transformer 架构,利用 ViT 架构整理信息、DiT 架构产出游戏内容,并结合 Decart 的推理引擎和 Etched 公司的 Sohu 芯片实现实时视频生成。Oasis 提高了游戏开发效率,减少开发人员数量、加快开发进度,同时丰富了游戏体验,增强真实感并提供个性化体验。然而,它也面临技术难题和对游戏行业就业的影响等挑战。未来,应在技术优化、游戏体验提升和行业发展等方向深入研究。
关键词:Oasis 游戏;AI 游戏;游戏开发;技术特点
ABSTRACT:The open source of the world’s first AI real-time generated game “oasis” has attracted widespread attention. It is based on the Transformer architecture, uses the ViT architecture to organize information and the DiT architecture to produce game content, and combines Decart’s inference engine and Etched’s Sohu chip to achieve real-time video generation. Oasis has improved the efficiency of game development, reduced the number of developers and accelerated the development progress. At the same time, it has enriched the game experience, enhanced the sense of reality and provided personalized experience. However, it also faces challenges such as technical difficulties and impacts on employment in the game industry. In the future, in-depth research should be conducted in directions such as technology optimization, game experience improvement and industry development.
Keywords: Oasis game; AI game; game development; technical characteristics
一、引言
1.1 研究背景
AI 技术在游戏领域不断发展,Oasis 游戏的开源引发广泛关注。随着科技的进步,AI 正以前所未有的冲击力重塑游戏行业。据 GitHub 发布的年度报告显示,2023 年全年新增超过 6 万个人工智能开源项目,数量是 2022 年的 3.5 倍,这充分体现了 AI 技术的迅猛发展态势。而在游戏领域,AI 的应用更是带来了深刻的变革。
全球首款 AI 实时生成游戏“oasis”的开源,标志着游戏开发进入了一个新的时代。这款游戏画面由 AI 每秒 20 帧渲染,类似《我的世界》,其独特的技术架构和创新的开发模式,为游戏行业带来了新的突破和机遇。
Oasis 经过了数百万小时游戏视频的训练,仅接收用户的键盘输入即可实时生成开放世界游戏。它不依赖传统的游戏引擎,而是采用单一的 AI 基座模型,实现了游戏的实时、可玩、可交互。这种创新的开发模式,不仅降低了游戏开发的成本和难度,还为玩家带来了全新的游戏体验。
同时,Oasis 的开源也为游戏开发者提供了一个新的平台和机会。开发者可以利用 Oasis 的代码和模型权重,进行二次开发和创新,推动游戏行业的发展和进步。
总之,Oasis 游戏的开源,为游戏行业带来了新的机遇和挑战。我们有理由相信,在 AI 技术的推动下,游戏行业将迎来更加繁荣的未来。
1.2 研究目的
Oasis 游戏的出现,为游戏开发带来了诸多变革。首先,它打破了传统游戏开发对游戏引擎的依赖,仅通过一个 AI 基座模型就能实现实时、可玩、可交互的开放世界游戏生成。这一创新极大地降低了游戏开发的门槛和成本。
据相关数据显示,传统游戏开发中,美术、程序等方面的成本较高。例如,一个中等规模的游戏开发项目,美术成本可能占总成本的 30%至 40%。而 Oasis 利用 AI 生成游戏画面,大大减少了美术方面的投入。以一个小型游戏团队为例,使用 Oasis 可以省去大量的美术岗位,如原画线稿和彩稿岗位不再需要,降低了人力成本。
同时,Oasis 的开源代码和公开的模型权重,为游戏开发者提供了丰富的资源和创新的平台。开发者可以在 Oasis 的基础上进行二次开发,结合自己的创意和需求,打造出更加个性化的游戏。这将促进游戏开发的多元化和创新性,推动游戏行业的发展。
在未来发展趋势方面,随着技术的不断进步,Oasis 有望在游戏体验上进一步提升。例如,在 Etched 打造的 Sohu 芯片上运行优化模型,就能达到 4K 级别的实时渲染,并发用户数量也将提升超过 10x。这将满足玩家对高画质游戏的需求,提升游戏的吸引力。
此外,AI 技术在游戏开发中的应用将越来越广泛。不仅在画面生成方面,还将在游戏剧情、关卡设计等方面发挥重要作用。例如,利用 AI 大模型可以生成更加丰富和复杂的游戏剧情,根据玩家的行为和喜好动态调整关卡难度,提高游戏的可玩性和趣味性。
总之,Oasis 游戏对游戏开发产生了深远的影响,未来有望在技术创新和用户体验方面不断发展,引领游戏行业走向新的高度。
二、Oasis 游戏的技术特点
2.1 基于 Transformer 架构的模型
Oasis 模型基于 Transformer 架构,由基于 ViT 的变分自动编码器和基于 DiT 的潜在扩散主干组成。这一独特的架构为 Oasis 游戏带来了强大的技术支持和创新的游戏体验。
2.1.1 ViT 架构在信息整理中的功能
在 Oasis 游戏中,ViT 架构发挥着至关重要的作用。ViT 就像工厂里负责整理和识别原材料的车间,能够对游戏画面的相关信息进行加工整理。它将游戏画面视为一系列的小块(patches),并将这些小块转换为特征向量。通过这种方式,ViT 能够高效地捕捉游戏画面中的细节和特征,为后续的处理提供准确的信息输入。
例如,在游戏中,玩家进行移动、跳跃、拾取物品等操作时,ViT 能够快速识别这些动作所对应的画面信息,并将其转换为特征向量。这些特征向量包含了游戏画面的颜色、形状、纹理等信息,为游戏的实时生成提供了基础。
此外,ViT 架构还具有很强的适应性和可扩展性。它可以根据不同的游戏场景和需求,进行调整和优化,以提高信息整理的效率和准确性。
2.1.2 DiT 架构在产出游戏内容中的作用
DiT 架构在 Oasis 游戏中负责产出游戏场景和物体等内容。它基于 Diffusion Transformer 架构,是工厂的核心生产线。DiT 结合了扩散模型和 Transformer 架构的优势,通过模拟从噪声到数据的扩散过程,能够生成高质量、逼真的游戏内容。
具体来说,DiT 首先接收 ViT 整理后的游戏画面信息,然后通过加速过的轴向、时空和因果注意力机制,克服长序列中的模型发散问题。在这个过程中,DiT 能够根据游戏输入实时交互,每次只生成一帧,并在 token 级别调节每个帧,因此可操纵性很高。
例如,当玩家在游戏中放置立方体砖块时,DiT 能够根据玩家的操作,实时生成相应的游戏场景和物体。它可以理解物体和建筑、照明的物理规律等复杂的游戏机制,使得生成的游戏内容更加真实和自然。
此外,DiT 架构还具有很强的稳定性和可扩展性。它可以在不同的硬件平台上运行,如 H100 和 Etched 公司的 Sohu 芯片。在 Sohu 芯片上运行 100B+参数的优化模型,就能达到 4K 级别的实时渲染,并发用户数量也将提升超过 10x。
2.2 实时视频生成技术
Oasis 游戏的实时视频生成技术得益于 Decart 的推理引擎和 Etched 公司的 Sohu 芯片的协同作用。
2.2.1 推理引擎与芯片的协同作用
Decart 的推理引擎结合 Etched 公司的 Sohu 芯片,为 Oasis 游戏的实时视频生成提供了强大的技术支持。Sohu 芯片是世界上第一个基于 Transformer 架构的 ASIC 芯片,专为 LLM 推理加速打造,不仅快过 Groq,也能碾压英伟达最新的 B200。推理引擎与芯片的协同作用,保证了在 Sohu 芯片上的稳定扩展和快速推理。
这种协同作用就像一个高效的团队,推理引擎负责协调和管理整个生成过程,而 Sohu 芯片则提供强大的计算能力。例如,在处理复杂的游戏场景和物体生成时,推理引擎能够根据游戏输入实时调整生成策略,而 Sohu 芯片则能够快速执行这些策略,确保游戏画面的流畅生成。此外,两者的协同作用还能够有效克服长序列中的模型发散问题,提高生成的稳定性和准确性。
2.2.2 自回归方式生成帧的优势
Oasis 游戏采用自回归方式生成帧,这一方式对游戏可操纵性的提升具有显著优势。自回归方式生成帧意味着每次只生成一帧,并根据游戏输入在 token 级别调节每个帧。这种方式使得游戏的生成过程更加灵活和可控。
例如,当玩家在游戏中进行操作时,自回归方式生成帧能够实时响应玩家的输入,根据玩家的动作生成相应的游戏画面。这种可操纵性使得玩家能够更加自由地探索游戏世界,提高了游戏的趣味性和可玩性。同时,自回归方式生成帧还能够提高生成的准确性和质量。由于每次只生成一帧,可以更加精细地控制画面的细节和质量,避免了一次性生成多帧可能出现的错误和不准确性。
总之,Decart 的推理引擎和 Etched 公司的 Sohu 芯片在 Oasis 游戏的实时视频生成中发挥了重要作用。两者的协同作用保证了在 Sohu 芯片上的稳定扩展和快速推理,而自回归方式生成帧则提升了游戏的可操纵性。这些技术特点使得 Oasis 游戏在实时视频生成方面具有独特的优势,为玩家带来了全新的游戏体验。
三、Oasis 游戏对游戏开发的积极影响
3.1 提高开发效率
Oasis 经过数百万小时游戏视频的训练,为游戏开发带来了显著的效率提升。
3.1.1 减少开发人员数量
行业观点普遍认为,AI 游戏在很大程度上能够减少制作游戏的人员数量。以 Electronic Arts 的首席执行官安德鲁·威尔逊为例,他声称在生成式人工智能的帮助下,EA 的效率将提高 30%,同时在未来五年内将玩家的氪金率提高 20%,这意味着更多的工作可以由 AI 完成,从而减少对开发人员的需求。在传统游戏开发中,需要大量的美术、程序等人员协同工作。而 Oasis 利用 AI 生成游戏画面,大大减少了美术方面的投入。例如,传统游戏开发中,一个中等规模的游戏项目可能需要多个原画线稿和彩稿岗位的人员,而使用 Oasis 后,这些岗位不再必要,从而减少了开发人员的数量。
3.1.2 加快开发进度
结合 Oasis 的开发过程,AI 技术加快游戏开发进度的方式主要体现在以下几个方面。首先,Oasis 不依赖传统的游戏引擎,而是采用单一的 AI 基座模型,这大大简化了开发流程。开发人员无需花费大量时间和精力去搭建复杂的游戏引擎,从而节省了开发时间。其次,Oasis 经过数百万小时游戏视频的训练,能够快速学习和掌握各种游戏场景和玩法,为开发人员提供了丰富的参考和灵感。例如,在游戏剧情设计方面,开发人员可以借鉴 Oasis 训练过程中学习到的各种故事线索和情节发展,快速构建出引人入胜的游戏剧情。此外,Oasis 的实时视频生成技术,采用自回归方式生成帧,能够实时响应玩家的输入,根据玩家的动作生成相应的游戏画面。这使得开发人员可以在开发过程中实时测试和调整游戏内容,加快了开发进度。例如,当开发人员对游戏中的某个关卡进行调整时,Oasis 可以立即生成新的游戏画面,让开发人员直观地看到调整后的效果,从而快速进行优化和改进。
3.2 丰富游戏体验
3.2.1 增强游戏的真实感
Oasis 对物体和建筑的物理规律的理解,极大地增强了游戏的真实感。在游戏中,物体的运动、碰撞以及建筑的搭建都遵循着现实世界的物理原则。例如,当玩家在游戏中搭建建筑物时,Oasis 能够准确地模拟建筑材料的重量、稳定性等物理特性。如果玩家搭建的结构不合理,建筑物可能会出现倾斜、倒塌等情况,就如同在现实生活中一样。这种对物理规律的准确模拟,让玩家在游戏中感受到更加真实的体验。
同时,Oasis 还能实现真实的光影效果。在游戏中,光线的传播、反射和折射都被精确地模拟出来,使得游戏世界更加生动逼真。比如,当太阳升起时,光线会逐渐照亮整个场景,物体的阴影也会随着太阳的位置而变化。这种真实的光影效果不仅增加了游戏的视觉吸引力,还为玩家提供了更加沉浸式的游戏体验。
3.2.2 提供个性化游戏体验
AI 技术在 Oasis 中发挥了重要作用,帮助开发者为玩家提供更加个性化的游戏体验。首先,通过对玩家行为数据的收集与分析,Oasis 能够了解玩家的游戏风格、偏好的难度级别、故事情节偏好等。例如,记录玩家在游戏中的选择路径、完成任务的时间等行为数据,然后通过机器学习模型进行分析,识别出玩家的偏好和习惯。
基于这些分析结果,开发者可以建立个性化玩家模型,为玩家定制化游戏体验。比如,对于喜欢探索的玩家,开发者可以为他们推荐没有接触过的功能和区域;对于社交型玩家,增加更多的社交能力,如组队冒险、挑战等。同时,Oasis 还可以使用自然语言处理和生成模型,生成动态的故事情节和对话,确保故事与玩家的行为相呼应。
此外,Oasis 还能通过实时调整与反馈,不断优化游戏体验。根据玩家的表现实时调整游戏难度,使用 AI 实时生成新的任务或调整当前的任务,以更好地匹配玩家的行为和兴趣。例如,如果玩家在某些关卡中表现出色,游戏可以自动提高后续关卡的难度;如果玩家对某个任务感到困难,游戏可以提供一些提示或调整任务难度。
在个性化推荐系统方面,Oasis 可以基于玩家历史行为推荐适合的任务或装备,提升游戏体验的个性化程度。例如,根据玩家过去喜欢的任务类型,为他们推荐类似的任务;或者根据玩家的装备使用情况,推荐更适合他们的装备。
总之,AI 技术在 Oasis 中的应用,为玩家提供了更加个性化的游戏体验,满足了不同玩家的需求,提高了他们的参与度和满意度。
四、Oasis 游戏带来的挑战
4.1 技术难题
Oasis 游戏在带来创新的同时,也面临着一些技术难题。其中,生成游戏画面时的时间稳定性问题尤为关键。
4.1.1 远处物体模糊问题
在 Oasis 游戏中,部分远处物体出现模糊会对游戏体验产生一定的影响。首先,这会降低游戏画面的整体清晰度和真实感,让玩家在探索游戏世界时感到视觉上的不适。例如,当玩家在游戏中眺望远方的山脉或建筑物时,如果这些物体呈现出模糊的状态,就会影响玩家对游戏场景的认知和沉浸感。此外,远处物体模糊还可能导致玩家在判断距离和方位时出现误差,影响游戏操作的准确性。
为了解决这个问题,开发团队可以考虑采用更先进的图像渲染技术。例如,利用超分辨率技术提高远处物体的清晰度,或者通过优化纹理映射和细节层次技术,使远处物体在不同距离下都能呈现出更加清晰的细节。同时,还可以结合人工智能算法,对远处物体进行智能识别和优化,根据玩家的视角和距离动态调整物体的清晰度。
4.1.2 不确定对象的时间一致性问题
不确定对象的时间一致性问题也是 Oasis 游戏面临的一个挑战。在游戏中,如果不确定对象的时间一致性得不到保证,就会出现画面混乱、不连贯的情况,严重影响游戏的流畅性和可玩性。例如,当一个物体的出现或消失时间不确定时,玩家可能会在游戏过程中感到困惑和不安。
为了应对这个问题,开发团队可以采用更加稳定的时间同步技术,确保游戏中的各个对象在时间上保持一致。例如,利用分布式时间同步算法,将游戏中的所有对象的时间同步到一个统一的时钟上,避免出现时间偏差。同时,还可以通过加强对不确定对象的监测和管理,及时发现并纠正时间不一致的问题。此外,开发团队还可以利用机器学习算法,对不确定对象的行为进行预测和优化,提高其时间一致性的稳定性。
4.2 对游戏行业就业的影响
4.2.1 可能替代的工作岗位
随着 AI 游戏的发展,一些游戏开发中的工作岗位可能面临被替代的风险。例如,美术设计中的一些重复性较高的工作岗位可能会受到较大影响。据艾瑞咨询发布的《2023 年中国 AIGC 产业全景报告》显示,AIGC 相关应用已帮助游戏行业在研发制作环节节约 50%-70%人力或时间成本。像传统的原画绘制、部分建模工作等,AI 可以快速生成大量的美术资源,使得月薪 1.5 万以下的美术设计岗位可能面临被替代的风险。此外,一些翻译外包等相对流程化的岗位也可能被 AI 取代。心动网络创始人黄一孟曾表示,一些游戏团队把原画外包团队和翻译外包公司给砍了,这充分体现了 AI 对这些岗位的冲击。在游戏开发过程中,一些基础的关卡设计工作也可能被 AI 替代,因为 AI 可以根据玩家的行为和喜好动态调整关卡难度,生成更加符合玩家需求的关卡。
4.2.2 创造的新就业机会
虽然 AI 游戏可能会替代一些传统岗位,但同时也为游戏行业带来了新的就业机会。一方面,AI 技术的发展需要专业的人才进行研发和维护。例如,AIGC 算法工程师、AI 捏脸师等与 AI 相关的岗位需求不断增加。据腾讯云和伽马数据联合推出的《2023 年游戏生命周期洞察报告》数据,超过 70%的游戏公司在产品研发层面使用了 AIGC 技术,这意味着需要大量的专业人才来研究和开发新的 AI 技术,并将其应用于游戏开发中。另一方面,随着 AI 游戏的不断发展,对游戏策划、创意设计等岗位的要求也越来越高。这些岗位需要具备与 AI 合作的能力,能够为 AI 提供正确的指令和创意方向。例如,游戏策划需要利用 AI 生成的剧情线索和情节发展,构建出更加引人入胜的游戏剧情。此外,AI 游戏的发展还催生了一些新的岗位,如 AI 游戏体验师,他们负责测试和评估 AI 游戏的可玩性和趣味性,为游戏的优化提供建议。总之,AI 游戏虽然给游戏行业的就业带来了一定的挑战,但也创造了新的就业机会,为游戏行业的发展注入了新的活力。
五、结论与展望
5.1 研究结论总结
Oasis 游戏作为全球首款 AI 实时生成游戏,为游戏开发带来了诸多积极影响,同时也面临着一些挑战。
在积极影响方面,Oasis 提高了游戏开发效率。它减少了开发人员数量,让更多工作由 AI 完成,例如在美术方面的投入大幅减少。同时,加快了开发进度,简化开发流程,提供丰富参考和灵感,实时生成游戏画面便于测试调整。此外,Oasis 丰富了游戏体验,增强了游戏的真实感,准确模拟物理规律和实现真实光影效果。还通过 AI 技术为玩家提供个性化游戏体验,收集分析玩家行为数据,建立个性化玩家模型,生成动态故事情节和对话,实时调整与反馈,以及提供个性化推荐系统。
然而,Oasis 也面临着挑战。技术难题方面,存在远处物体模糊和不确定对象的时间一致性问题,影响游戏体验。为解决这些问题,可采用先进图像渲染技术、稳定的时间同步技术和机器学习算法等。在对游戏行业就业的影响方面,一些重复性高的工作岗位如美术设计、翻译外包和基础关卡设计等可能被替代,但同时也创造了新的就业机会,如 AIGC 算法工程师、AI 捏脸师、游戏策划与创意设计岗位以及 AI 游戏体验师等。
综上所述,Oasis 游戏的出现标志着游戏开发进入了一个新的时代。虽然面临挑战,但也为游戏行业的发展带来了新的机遇和可能性。未来,随着技术的不断进步,我们有理由相信 Oasis 游戏将在解决现有挑战的基础上,不断创新和发展,为玩家带来更加精彩的游戏体验,推动游戏行业迈向更高的台阶。
5.2 未来研究方向展望
在未来的 AI 游戏领域,有许多值得深入研究的方向。
一、技术优化方向
- 提高图像质量:继续探索更先进的图像渲染技术,不仅要解决远处物体模糊的问题,还要进一步提升整体画面的清晰度和真实感。例如,研究基于深度学习的超分辨率技术,使游戏在不同分辨率下都能呈现出细腻的画面。同时,结合物理渲染技术,更准确地模拟光线在不同材质上的反射、折射和散射,为玩家打造更加逼真的游戏世界。
- 增强时间稳定性:深入研究时间同步技术和机器学习算法,以提高不确定对象的时间一致性。可以利用强化学习算法,让游戏中的对象在不同场景下自动学习和调整行为模式,以确保时间上的稳定性。此外,建立更加精准的物理模型,使游戏中的物体运动和交互更加符合现实世界的规律,减少因物理模拟不准确而导致的时间不一致问题。
- 优化 AI 基座模型:不断改进 Oasis 的 AI 基座模型,提高其学习能力和适应性。可以引入多模态学习技术,让模型能够同时处理图像、声音、文本等多种信息,为玩家提供更加丰富的游戏体验。例如,通过语音识别技术,实现玩家与游戏角色的语音交互;利用自然语言处理技术,让游戏角色能够理解和回应玩家的文字指令。
二、游戏体验提升方向
- 深化个性化体验:进一步挖掘玩家行为数据,利用更复杂的机器学习算法建立更加精准的个性化玩家模型。不仅要考虑玩家的游戏风格、偏好的难度级别和故事情节偏好,还可以分析玩家的情绪状态和社交需求,为玩家提供更加贴心的游戏体验。例如,当玩家在游戏中表现出焦虑情绪时,游戏可以自动调整难度或提供一些放松的任务;对于社交需求较高的玩家,增加更多的社交互动功能,如实时语音聊天、合作任务等。
- 拓展游戏玩法:结合 AI 技术,不断创新游戏玩法。可以开发基于 AI 的动态剧情生成系统,让游戏剧情根据玩家的选择和行为实时变化,增加游戏的重玩价值。同时,探索多人协作与竞争的新模式,利用 AI 协调玩家之间的互动,提高游戏的趣味性和挑战性。例如,在多人在线游戏中,AI 可以根据玩家的实力和策略自动分配队友和对手,确保游戏的公平性和竞技性。
- 提升游戏沉浸感:利用虚拟现实(VR)和增强现实(AR)技术,与 AI 游戏相结合,为玩家带来更加沉浸式的游戏体验。例如,玩家可以通过 VR 设备进入 Oasis 的游戏世界,身临其境地感受游戏中的场景和氛围;利用 AR 技术,将游戏中的角色和物体与现实世界融合,创造出独特的游戏体验。同时,结合触觉反馈技术,让玩家在游戏中能够感受到真实的触感,进一步增强游戏的沉浸感。
三、行业发展方向
- 建立行业标准:随着 AI 游戏的快速发展,有必要建立一套统一的行业标准,规范 AI 游戏的开发和运营。这包括技术标准、安全标准、用户体验标准等方面。例如,制定关于 AI 生成内容的质量标准,确保游戏中的画面、剧情和角色行为符合一定的艺术和道德要求;建立安全标准,保护玩家的个人信息和游戏数据安全;制定用户体验标准,确保游戏的可玩性、稳定性和公平性。
- 加强人才培养:AI 游戏的发展需要大量的专业人才,包括 AI 算法工程师、游戏设计师、美术设计师等。因此,有必要加强人才培养,建立完善的人才培养体系。可以通过高校开设相关专业课程、企业举办培训和实习项目等方式,培养出更多具备 AI 技术和游戏开发能力的专业人才。同时,鼓励跨学科合作,促进计算机科学、心理学、艺术设计等领域的人才共同参与 AI 游戏的开发,为行业的发展提供人才支持。
- 推动产业合作:AI 游戏的发展需要产业链上各个环节的共同努力。游戏开发商、硬件制造商、技术提供商等应加强合作,共同推动 AI 游戏产业的发展。例如,游戏开发商可以与硬件制造商合作,优化游戏在不同硬件平台上的性能;与技术提供商合作,引入先进的 AI 技术和云计算服务,提高游戏的开发效率和运营稳定性。同时,政府和行业协会也应发挥引导作用,促进产业合作,为 AI 游戏的发展创造良好的政策环境和市场环境。
总之,未来的 AI 游戏领域充满了机遇和挑战。通过在技术优化、游戏体验提升和行业发展等方面的深入研究和创新,我们有理由相信 AI 游戏将为玩家带来更加精彩的游戏体验,推动游戏行业迈向新的高度。
免费小程序《字形绘梦》上线啦!
欢迎大家体验!
RA/SD 衍生者AI训练营。发布者:風之旋律,转载请注明出处:https://www.shxcj.com/archives/7059