DIAMBRA Arena简介
DIAMBRA Arena是一个专为强化学习研究和实验设计的创新软件平台。它提供了一系列高质量的环境,让研究人员能够在流行的街机模拟视频游戏中进行实验。DIAMBRA Arena的核心优势在于它提供了一个标准化的接口,完全兼容OpenAI Gym/Gymnasium格式的Python API,这使得它的使用变得简单直观。
主要特性
DIAMBRA Arena具有以下显著特点:
- 跨平台支持: 支持所有主流操作系统(Linux、Windows和MacOS)。
- 易于安装: 可以通过Python的PIP包管理器轻松安装。
- 免费使用: 用户只需在官方网站注册即可免费使用。
- 丰富的文档: 提供全面的文档支持。
- 示例代码: 包含多个涵盖主要用例的示例代码。
- 多种游戏模式: 支持单人(1P)和双人(2P)模式。
- 广泛的研究应用: 适用于多个强化学习子领域,包括标准强化学习、竞争性多智能体、人机竞争、自我对弈、模仿学习和人在环中学习等。
可用游戏
DIAMBRA Arena精心选择了一系列流行的格斗类复古游戏作为实验环境。这些游戏虽然有着相似的基本机制,但各自提供了独特的挑战,如不同类型和数量的角色、组合技的执行方式、生命值恢复机制等。目前可用的游戏包括:
- Dead Or Alive ++
- Street Fighter III: 3rd Strike
- Tekken Tag Tournament
- Ultimate Mortal Kombat 3
- Samurai Shodown V Special
- The King of Fighters '98 Ultimate Match Hero
- Marvel VS Capcom
- X-Men VS Street Fighter
- Soul Calibur
更多游戏正在不断添加中。
安装和使用
要开始使用DIAMBRA Arena,请按照以下步骤操作:
- 在官方网站创建免费账户。
- 根据您的操作系统安装Docker Desktop。
- 安装DIAMBRA命令行界面:
python3 -m pip install diambra - 安装DIAMBRA Arena:
python3 -m pip install diambra-arena
强烈建议使用虚拟环境来隔离Python包的安装。
快速开始
以下是一个使用随机智能体运行完整游戏回合的基本Python脚本:
import diambra.arena
env = diambra.arena.make("doapp", render_mode="human")
observation, info = env.reset(seed=42)
while True:
env.render()
actions = env.action_space.sample()
observation, reward, terminated, truncated, info = env.step(actions)
if terminated or truncated:
observation, info = env.reset()
break
env.close()
要运行此脚本,请使用以下命令:
diambra run -r your/roms/local/path python script.py
与强化学习库的兼容性
DIAMBRA Arena设计时考虑了与主流强化学习库的最大兼容性。它原生提供了与Stable Baselines 3和Ray RLlib的接口,同时也支持已弃用的Stable Baselines。这些接口的使用在官方文档和DIAMBRA Agents仓库中有详细说明。
支持的库版本如下:
- Stable Baselines 3 (2.1.*)
- Ray RLlib (2.7.*)
- Stable Baselines (2.10.2, 已弃用)
竞赛平台
DIAMBRA还提供了一个竞赛平台,允许用户提交他们的智能体,参与全球视频游戏锦标赛。平台特点包括:
- 公开的全球排行榜
- 根据智能体表现解锁成就
- 在Twitch频道直播评估过程
结语
DIAMBRA Arena为强化学习研究和实验提供了一个强大而灵活的平台。通过提供高质量的游戏环境、标准化的接口和丰富的功能,它为研究人员和开发者创造了探索和推进强化学习领域的绝佳机会。无论您是研究人员、学生还是AI爱好者,DIAMBRA Arena都为您提供了一个独特的平台,让您能够在有趣的视频游戏环境中开发和测试先进的AI算法。
随着更多游戏和功能的不断加入,DIAMBRA Arena正在成为强化学习领域不可或缺的工具。我们期待看到更多创新的研究和应用在这个平台上诞生,推动人工智能在游戏和更广泛领域的发展。
如果您对DIAMBRA Arena感兴趣,不妨立即注册并开始您的强化学习之旅。谁知道呢,也许下一个突破性的AI算法就将诞生在您的实验中!
