太空入侵者

../../../_images/atari_space_invaders.gif

此环境属于Atari 环境。请先阅读该页面以获取一般信息。

导入

from pettingzoo.atari import space_invaders_v2

动作

离散

并行 API

手动控制

智能体

agents= ['first_0', 'second_0']

智能体

2

动作形状

(1,)

动作值

[0,5]

观察形状

(210, 160, 3)

观察值

(0,255)

经典的 Atari 游戏,但有两个玩家控制两艘飞船,每个玩家都试图最大化他们的分数。

这个游戏有一个合作方面,玩家可以通过合作通关来最大化他们的分数。普通外星人价值 5-30 分,取决于它们开始时的高度,屏幕顶端飞过的飞船价值 100 分。

然而,也有一个竞争方面,当另一位玩家被外星人击中时,该玩家会获得 200 分的奖励。因此,以某种方式破坏另一位玩家也是一种可能的策略。

生命数量在飞船之间共享,即当一艘飞船被击中 3 次时游戏结束。

官方太空入侵者手册

环境参数

一些环境参数是所有 Atari 环境共有的,并在基础 Atari 文档中描述。

太空入侵者特定的参数是

space_invaders_v2.env(alternating_control=False, moving_shields=True,
zigzaging_bombs=False, fast_bomb=False, invisible_invaders=False)

alternating_control:两名玩家中只有一个可以在同一时间射击。如果你射击了,你的对手就可以射击。然而,你不能永远霸占射击能力,最终控制权无论如何都会转移到你的对手那里。

moving_shields:护盾来回移动,提供不太可靠的保护。

zigzaging_bombs:入侵者的炸弹来回移动,使其更难躲避。

fast_bomb:炸弹速度快得多,使其更难躲避。

invisible_invaders:入侵者是隐形的,使其更难击中。

动作空间(最小)

在任何给定回合中,智能体可以从 6 种动作中选择一种。

动作

行为

0

无操作

1

射击

2

向上移动

3

向右移动

4

向左移动

5

向下移动

版本历史

  • v2:最小动作空间 (1.18.0)

  • v1:整个 API 的重大更改 (1.4.0)

  • v0:初始版本发布 (1.0.0)

用法

AEC

from pettingzoo.atari import space_invaders_v2

env = space_invaders_v2.env(render_mode="human")
env.reset(seed=42)

for agent in env.agent_iter():
    observation, reward, termination, truncation, info = env.last()

    if termination or truncation:
        action = None
    else:
        # this is where you would insert your policy
        action = env.action_space(agent).sample()

    env.step(action)
env.close()

并行

from pettingzoo.atari import space_invaders_v2

env = space_invaders_v2.parallel_env(render_mode="human")
observations, infos = env.reset()

while env.agents:
    # this is where you would insert your policy
    actions = {agent: env.action_space(agent).sample() for agent in env.agents}

    observations, rewards, terminations, truncations, infos = env.step(actions)
env.close()

API

class pettingzoo.atari.space_invaders.space_invaders.raw_env(alternating_control=False, moving_shields=True, zigzaging_bombs=False, fast_bomb=False, invisible_invaders=False, **kwargs)[source]