我更改了训练使可以按照特定比例的输入训练,结果训完后生成的图出现形变,有没有朋友解答一下(dreambooth训练unet和text_encoder)
不知道你这个问题是否已经解决, 如果还没有解决的话:根据参考资料和问题描述,stable diffusion训练中并没有规定必须使用正方形的训练数据。因此,问题产生的可能原因是在特定比例输入进行训练时,图片与模型的匹配出现了问题,导致生成的图像产生了形变。
要解决这个问题,可以尝试以下方法: 1. 确认训练数据的长宽比和模型输入的长宽比是否匹配。如果不匹配,可以使用image resizing的方法将数据resize为符合模型输入要求的比例。 2. 检查训练数据在输入前是否做了preprocessing,例如normalize或是data augmentation等。如果有,可以将其调整为适合当前问题的preprocessing方式。 3. 确认U-Net和Text-Encoder的超参数设置是否合理。例如,增加训练迭代次数,调整batch size或是学习率等。 4. 尝试使用其他的模型进行训练,以确定是否是模型本身的问题导致生成的图像出现形变。
需要注意的是,由于问题描述过于简要,以上方法只是一些可能的解决方案,具体操作需要根据实际情况进行调整。如果以上方法都不能解决问题,可能需要对数据和模型进行更深入的分析,或是考虑使用其他算法模型等方法。
没事,resize写反了