CNN训练时，为什么每次训练的loss没有持续下降的趋势

采用Pytorch，建立CNN对图像进行训练，输入是128128的图像，输出与拟合的数据是1616的图像，
每次对不同的训练集训练，出现的loss没有下降，反而和训练集有一定的关系 。

你是指每个epoch对不同的数据集还是对同一个数据集训练loss没有下降，这是两回事
每个epoch对不同数据集的话，那我无话可说，你开心就好
对同一个数据集loss没有下降，那是应为你这才几个epoch，网络都还没开始拟合呢，loss波动大不是很正常的事情吗，而且和你的损失函数设计也有关系的

我猜，应该每次对所有训练集进行训练。