CNN准确率一直维持在50%

我用lenet5 对交通标志进行识别，数据集是GTSRB，包含43类，每一类的数量在170-240之间，训练过程中在50个epoch之后训练集准确率就维持在50左右了，请问各位有人知道这是为什么吗？