minimalRL

최소 -pytorch

최소한의 코드 라인을 갖춘 기본 RL 알고리즘의 구현! (Pytorch 기반)

• 각 알고리즘은 단일 파일 내에서 완료됩니다.

• 각 파일의 길이는 최대 100 ~ 150 줄의 코드입니다.

• 모든 알고리즘은 GPU 없이도 30 초 이내에 교육을받을 수 있습니다.

• 대상은 "CartPole-V1"에 고정되어 있습니다. 구현에 집중할 수 있습니다.

알고리즘

1. 강화 (67 라인)
2. 바닐라 액터 크리 티어 (98 라인)
3. DQN (리플레이 메모리 및 대상 네트워크를 포함한 112 줄)
4. PPO (GAE를 포함한 119 라인)
5. DDPG (OU 노이즈 및 소프트 대상 업데이트를 포함한 145 줄)
6. A3C (129 라인)
7. Acer (149 라인)
8. A2C (188 라인)
9. SAC (171 라인) 추가 !!
10. PPO 연속 (161 라인)이 추가되었습니다 !!
11. VTRACE (137 라인)가 추가되었습니다 !!
12. 어떤 제안도 ...?

의존성

1. Pytorch
2. Openai Gym (> 0.26.2 중요 !! 이전 버전에 대한 더 이상 지원하지 않음)

용법

 # Works only with Python 3.
# e.g.
python3 REINFORCE.py
python3 actor_critic.py
python3 dqn.py
python3 ppo.py
python3 ddpg.py
python3 a3c.py
python3 a2c.py
python3 acer.py
python3 sac.py