minimalRL

Minimalrl-Pytorch

Implementações de algoritmos básicos de RL com linhas mínimas de códigos! (Baseado em Pytorch)

• Cada algoritmo está completo em um único arquivo.

• O comprimento de cada arquivo é de até 100 ~ 150 linhas de códigos.

• Cada algoritmo pode ser treinado em 30 segundos, mesmo sem GPU.

• O ENVS é fixado em "Cartpole-V1". Você pode apenas se concentrar nas implementações.

Algoritmos

1. Reforçar (67 linhas)
2. Vanilla ator-crítico (98 linhas)
3. DQN (112 linhas, incluindo memória de reprodução e rede de destino)
4. PPO (119 linhas, incluindo GAE)
5. DDPG (145 linhas, incluindo ruído da OU e atualização de destino suave)
6. A3C (129 linhas)
7. Acer (149 linhas)
8. A2C (188 linhas)
9. SAC (171 linhas) adicionado !!
10. PPO-contínuo (161 linhas) adicionado !!
11. Vtrace (137 linhas) adicionado !!
12. Alguma sugestão ...?

Dependências

1. Pytorch
2. Ginásio OpenAI (> 0,26,2 IMPORTANTE !! Não é mais suporte para as versões anteriores)

Uso

 # Works only with Python 3.
# e.g.
python3 REINFORCE.py
python3 actor_critic.py
python3 dqn.py
python3 ppo.py
python3 ddpg.py
python3 a3c.py
python3 a2c.py
python3 acer.py
python3 sac.py