修改yolov5后训练的准确率振荡，有什么办法让准确率高于原yolov5网络？

修改了yolov5的backbone部分，准确率震荡很严重，有什么办法让准确率高于原yolov5网络？
橙色的线为yolov5网络，蓝色的为修改后的网络