❤️ 如果你也关注大模型与 AI 的发展现状,且对大模型应用开发非常感兴趣,我会快速跟你分享最新的感兴趣的 AI 应用和热点信息,也会不定期分享自己的想法和开源实例,欢迎关注我哦!
🥦 微信公众号|搜一搜:蚝油菜花 🥦
🚀 快速阅读
- Unbounded 是一款突破传统游戏局限的无限人生模拟游戏。
- 游戏利用 LLM 和视觉生成模型,创造一个没有固定规则和边界的游戏体验。
- 玩家能创建、定制外观和个性独特的角色,用自然语言与游戏角色互动。
正文(附运行示例)
Unbounded 是什么
Unbounded 是谷歌和北卡罗来纳大学教堂山分校共同推出的无限人生模拟游戏。游戏突破传统视频游戏的局限,用生成模型,如大型语言模型(LLM)和视觉生成模型,创造一个没有固定规则和边界的游戏体验。玩家与自己的虚拟角色互动,用自然语言指令引导角色在虚拟世界中探索、互动,形成连贯的故事线。
Unbounded 的主要功能
- 角色个性化:玩家能创建、定制外观和个性独特的角色。
- 游戏环境生成:系统自动生成持久的、可互动的游戏世界,供角色探索。
- 开放式互动:玩家用自然语言与游戏角色互动,没有预设规则限制互动。
- 实时生成:游戏接近实时的速度运行,每秒更新场景,提供流畅的游戏体验。
Unbounded 的技术原理
- 大型语言模型(LLM):用专门化、经过蒸馏的大型语言模型,实时动态生成游戏机制、叙事和角色互动。
- 视觉生成模型:引入新的动态区域图像提示适配器(IP-Adapter),确保在多个环境中保持角色的视觉一致性。
- 潜在一致性模型(LCM):用 LCM 实现实时文本到图像(T2I)生成,支持高分辨率图像的快速生成。
- 区域 IP-Adapter 与块丢弃:基于动态掩码和注意力机制分离角色和环境的条件,防止它们之间的干扰,确保角色和环境的一致性。
- 多 LLM 协作:构建一个包含两个 LLM 智能体的角色生活模拟游戏,一个作为世界模拟模型,另一个作为用户模型,模拟玩家与游戏世界的互动。
资源
- 项目官网 :generative-infinite-game.github.io
- arXiv 技术论文 :https://arxiv.org/pdf/2410.18975
❤️ 如果你也关注大模型与 AI 的发展现状,且对大模型应用开发非常感兴趣,我会快速跟你分享最新的感兴趣的 AI 应用和热点信息,也会不定期分享自己的想法和开源实例,欢迎关注我哦!
🥦 微信公众号|搜一搜:蚝油菜花 🥦