minimalRL

minimalrl-pytorch

Implémentations d'algorithmes RL de base avec des lignes de codes minimales! (Basé sur Pytorch)

• Chaque algorithme est complet dans un seul fichier.

• La longueur de chaque fichier est jusqu'à 100 ~ 150 lignes de codes.

• Chaque algorithme peut être formé dans les 30 secondes, même sans GPU.

• Les envs sont fixés à "Cartpole-V1". Vous pouvez simplement vous concentrer sur les implémentations.

Algorithmes

1. Renforcer (67 lignes)
2. Acteur vanille-critique (98 lignes)
3. DQN (112 lignes, y compris la mémoire de relecture et le réseau cible)
4. PPO (119 lignes, y compris GAE)
5. DDPG (145 lignes, y compris le bruit OU et la mise à jour de la cible douce)
6. A3C (129 lignes)
7. Acer (149 lignes)
8. A2C (188 lignes)
9. Sac (171 lignes) ajouté !!
10. PPO-Continuous (161 lignes) ajouté !!
11. Vtrace (137 lignes) ajouté !!
12. Une suggestion ...?

Dépendances

1. Pytorch
2. Openai Gym (> 0,26.2 IMPORTANT !! Pas de support pour les versions précédentes)

Usage

 # Works only with Python 3.
# e.g.
python3 REINFORCE.py
python3 actor_critic.py
python3 dqn.py
python3 ppo.py
python3 ddpg.py
python3 a3c.py
python3 a2c.py
python3 acer.py
python3 sac.py