双重扣篮

../../../_images/atari_double_dunk.gif

此环境是 Atari 环境 的一部分。请先阅读该页面以获取一般信息。

导入

from pettingzoo.atari import double_dunk_v3

动作

离散

并行 API

手动控制

智能体

agents= [‘first_0’, ‘second_0’]

智能体

2

动作形状

(1,)

动作值

[0,17]

观测形状

(210, 160, 3)

观测值

(0,255)

一款结合了控制和精确选择的对抗性游戏。

游戏有两个阶段:选择和进行。选择可能很困难,因为您必须保持相同的动作几个步骤,然后采取 0 动作。策略选择有时间限制:如果玩家在 2 秒(120 帧)后未选择任何动作,则玩家将受到 -1 的奖励,并且计时器重置。这可以防止一名玩家无限期地拖延游戏,但也意味着这不再是纯粹的零和游戏。

一旦开始进行,每支队伍有两名球员。您一次只能控制一名,控制哪名球员取决于选择的战术。得分规则对于篮球迷来说应该很熟悉(每次成功投篮得 2-3 分)。

双重扣篮官方手册

环境参数

环境参数对所有 Atari 环境都是通用的,并在 基础 Atari 文档 中进行了描述。

动作空间

在任何给定回合中,智能体可以从 18 种动作中选择一种。

动作

行为

0

无操作

1

开火

2

向上移动

3

向右移动

4

向左移动

5

向下移动

6

向右上移动

7

向左上移动

8

向右下移动

9

向左下移动

10

向上开火

11

向右开火

12

向左开火

13

向下开火

14

向右上开火

15

向左上开火

16

向右下开火

17

向左下开火

版本历史

  • v3: 最小动作空间 (1.18.0)

  • v2: 无动作计时器 (1.9.0)

  • v1: 整个 API 的重大更改 (1.4.0)

  • v0: 初版发布 (1.0.0)

用法

AEC

from pettingzoo.atari import double_dunk_v3

env = double_dunk_v3.env(render_mode="human")
env.reset(seed=42)

for agent in env.agent_iter():
    observation, reward, termination, truncation, info = env.last()

    if termination or truncation:
        action = None
    else:
        # this is where you would insert your policy
        action = env.action_space(agent).sample()

    env.step(action)
env.close()

并行

from pettingzoo.atari import double_dunk_v3

env = double_dunk_v3.parallel_env(render_mode="human")
observations, infos = env.reset()

while env.agents:
    # this is where you would insert your policy
    actions = {agent: env.action_space(agent).sample() for agent in env.agents}

    observations, rewards, terminations, truncations, infos = env.step(actions)
env.close()

API

class pettingzoo.atari.double_dunk.double_dunk.raw_env(**kwargs: Any)[source]