gitextract_ql1s9b61/ ├── README.md ├── hw1/ │ ├── .idea/ │ │ ├── hw1.iml │ │ ├── misc.xml │ │ ├── modules.xml │ │ └── workspace.xml │ ├── BehavioralCloning.py │ ├── DAgger.py │ ├── README.md │ ├── data/ │ │ ├── Ant-v1.train.npz │ │ ├── HalfCheetah-v1.train.npz │ │ ├── Hopper-v1.train.npz │ │ ├── Humanoid-v1.train.npz │ │ ├── Reacher-v1.train.npz │ │ └── Walker2d-v1.train.npz │ ├── demo.bash │ ├── experts/ │ │ ├── Ant-v1.pkl │ │ ├── HalfCheetah-v1.pkl │ │ ├── Hopper-v1.pkl │ │ ├── Humanoid-v1.pkl │ │ ├── Reacher-v1.pkl │ │ └── Walker2d-v1.pkl │ ├── load_policy.py │ ├── log/ │ │ ├── Ant-v1_BC_30-01-2018_10-32-45/ │ │ │ └── log.txt │ │ ├── Ant-v1_DA_30-01-2018_10-51-03/ │ │ │ └── log.txt │ │ ├── HalfCheetah-v1_BC_30-01-2018_10-51-19/ │ │ │ └── log.txt │ │ ├── HalfCheetah-v1_DA_30-01-2018_11-11-33/ │ │ │ └── log.txt │ │ ├── Hopper-v1_BC_30-01-2018_10-55-39/ │ │ │ └── log.txt │ │ ├── Hopper-v1_BCbig_30-01-2018_11-02-29/ │ │ │ └── log.txt │ │ ├── Hopper-v1_DA_30-01-2018_11-24-58/ │ │ │ └── log.txt │ │ ├── Humanoid-v1_BC_30-01-2018_10-28-53/ │ │ │ └── log.txt │ │ ├── Humanoid-v1_DA_30-01-2018_10-31-26/ │ │ │ └── log.txt │ │ ├── Reacher-v1_BC_30-01-2018_10-57-25/ │ │ │ └── log.txt │ │ ├── Reacher-v1_DA_30-01-2018_11-27-44/ │ │ │ └── log.txt │ │ ├── Walker2d-v1_BC_30-01-2018_10-58-02/ │ │ │ └── log.txt │ │ └── Walker2d-v1_DA_30-01-2018_11-28-50/ │ │ └── log.txt │ ├── logz.py │ ├── plot.py │ ├── run_expert.py │ └── tf_util.py ├── hw2/ │ ├── .idea/ │ │ ├── hw2.iml │ │ ├── misc.xml │ │ ├── modules.xml │ │ └── workspace.xml │ ├── data/ │ │ ├── HalfCheetah_b50000_rtg_na_25bl_HalfCheetah-v1_31-01-2018_19-35-00/ │ │ │ ├── 1/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 11/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 21/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 31/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ └── 41/ │ │ │ ├── log.txt │ │ │ ├── params.json │ │ │ └── vars.pkl │ │ ├── InvertedPendulum_sb_rtg_na_0.02_InvertedPendulum-v1_02-02-2018_10-42-58/ │ │ │ ├── 1/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 11/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 21/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 31/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ └── 41/ │ │ │ ├── log.txt │ │ │ ├── params.json │ │ │ └── vars.pkl │ │ ├── InvertedPendulum_sb_rtg_na_bl_0.02_InvertedPendulum-v1_02-02-2018_10-42-44/ │ │ │ ├── 1/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 11/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 21/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 31/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ └── 41/ │ │ │ ├── log.txt │ │ │ ├── params.json │ │ │ └── vars.pkl │ │ ├── lb_no_rtg_dna_CartPole-v0_24-01-2018_09-28-29/ │ │ │ ├── 1/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 11/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 21/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 31/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ └── 41/ │ │ │ ├── log.txt │ │ │ ├── params.json │ │ │ └── vars.pkl │ │ ├── lb_rtg_dna_CartPole-v0_24-01-2018_09-20-37/ │ │ │ ├── 1/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 11/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 21/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 31/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ └── 41/ │ │ │ ├── log.txt │ │ │ ├── params.json │ │ │ └── vars.pkl │ │ ├── lb_rtg_na_CartPole-v0_24-01-2018_09-11-55/ │ │ │ ├── 1/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 11/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 21/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 31/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ └── 41/ │ │ │ ├── log.txt │ │ │ ├── params.json │ │ │ └── vars.pkl │ │ ├── sb_no_rtg_dna_CartPole-v0_24-01-2018_09-00-15/ │ │ │ ├── 1/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 11/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 21/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 31/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ └── 41/ │ │ │ ├── log.txt │ │ │ ├── params.json │ │ │ └── vars.pkl │ │ ├── sb_rtg_dna_CartPole-v0_24-01-2018_09-04-19/ │ │ │ ├── 1/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 11/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 21/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 31/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ └── 41/ │ │ │ ├── log.txt │ │ │ ├── params.json │ │ │ └── vars.pkl │ │ ├── sb_rtg_na_CartPole-v0_24-01-2018_09-08-49/ │ │ │ ├── 1/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 11/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 21/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ ├── 31/ │ │ │ │ ├── log.txt │ │ │ │ ├── params.json │ │ │ │ └── vars.pkl │ │ │ └── 41/ │ │ │ ├── log.txt │ │ │ ├── params.json │ │ │ └── vars.pkl │ │ └── sb_rtg_na_l2_CartPole-v0_25-01-2018_09-22-07/ │ │ ├── 1/ │ │ │ ├── log.txt │ │ │ ├── params.json │ │ │ └── vars.pkl │ │ ├── 11/ │ │ │ ├── log.txt │ │ │ ├── params.json │ │ │ └── vars.pkl │ │ ├── 21/ │ │ │ ├── log.txt │ │ │ ├── params.json │ │ │ └── vars.pkl │ │ ├── 31/ │ │ │ ├── log.txt │ │ │ ├── params.json │ │ │ └── vars.pkl │ │ └── 41/ │ │ ├── log.txt │ │ ├── params.json │ │ └── vars.pkl │ ├── logz.py │ ├── plot.py │ └── train_pg.py ├── hw3/ │ ├── .idea/ │ │ ├── hw3.iml │ │ ├── misc.xml │ │ ├── modules.xml │ │ └── workspace.xml │ ├── README │ ├── atari_wrappers.py │ ├── dqn.py │ ├── dqn_utils.py │ ├── log/ │ │ ├── _RAM_30-01-2018_15-20-56/ │ │ │ └── log.txt │ │ ├── _RAM_30-01-2018_22-29-12/ │ │ │ └── log.txt │ │ └── _RAM_31-01-2018_08-28-28/ │ │ └── log.txt │ ├── logz.py │ ├── plot.py │ ├── run_dqn_atari.py │ └── run_dqn_ram.py └── hw4/ ├── .idea/ │ ├── hw4.iml │ ├── misc.xml │ ├── modules.xml │ └── workspace.xml ├── cheetah_env.py ├── controllers.py ├── cost_functions.py ├── data/ │ ├── mb_mpc_HalfCheetah-v1_28-01-2018_16-06-09/ │ │ └── log.txt │ └── mb_mpc_HalfCheetah-v1_30-01-2018_09-57-32/ │ └── log.txt ├── dynamics.py ├── logz.py ├── main.py └── plot.py