顺便分享一下炼制人物lora模型的经验:
1.素材图片一般需要10张以上,要有不同角度,不同表情的图片,图片越多越好,图片少于5张大概率过拟合;
2.素材图片的背景尽量选择单一背景,最好是扣图后的空白背景,减少素材污染;
3.图片打标签很重要很繁琐,这个挺反直觉的,想要训练的风格不要打标,不想要的风格需要打标,打标签很重要,要精简又不失必要性;
4.loss值尽量选择0.072-0.088之间的,低于这个数值很可能过拟合,高于这个数值基本都欠拟合。loss值可能会受到素材图tag的影响,tag越多越杂,loss值越不容易降低。