用PPO2做小车避障，reward上升之后一直是平的，这种现象正常吗？

img


每盘总奖励的曲线.
用PPO2做小车避障，reward上升之后一直是平的，这种现象正常吗？
如果有问题，有什么办法解决？