ppo

我最近在研究ppo神经网络训练机器人，超参啊梯度啊奖励函数啥真的头疼