minimalRL

minimalrl-pytorch

¡Implementaciones de algoritmos RL básicos con líneas mínimas de códigos! (Basado en Pytorch)

• Cada algoritmo está completo dentro de un solo archivo.

• La longitud de cada archivo es de hasta 100 ~ 150 líneas de códigos.

• Cada algoritmo puede ser entrenado en 30 segundos, incluso sin GPU.

• Los envss se fijan a "Cartpole-V1". Puede centrarse en las implementaciones.

Algoritmos

1. Reforzar (67 líneas)
2. Actor de vainilla-crítico (98 líneas)
3. DQN (112 líneas, incluida la memoria de reproducción y la red de destino)
4. PPO (119 líneas, incluyendo GAE)
5. DDPG (145 líneas, incluida la actualización de ruido OU y de objetivos suaves)
6. A3C (129 líneas)
7. Acer (149 líneas)
8. A2C (188 líneas)
9. SAC (171 líneas) agregado !!
10. ¡PPO-Continuo (161 líneas) agregado!
11. Vtrace (137 líneas) ¡Agregado!
12. ¿Alguna sugerencia ...?

Dependencias

1. Pytorch
2. Operai Gym (> 0.26.2 importante !! ya no es apoyo para las versiones anteriores)

Uso

 # Works only with Python 3.
# e.g.
python3 REINFORCE.py
python3 actor_critic.py
python3 dqn.py
python3 ppo.py
python3 ddpg.py
python3 a3c.py
python3 a2c.py
python3 acer.py
python3 sac.py