【正则化制作功能LoRA】最新LoRA模型训练进阶教程4-【正则化制作功能LoRA】最新LoRA模型训练进阶教程4

AID:
CID:
视频图片:
作者头像:
弹幕地址:
视频描述:

热门回复:

  • 爱莉光辉照大地:up主您好,我对正则化有以下问题想请问一下,由于我并未学习过深度学习相关的知识,所以可能问题比较呆,望见谅Orz 就是请问一下,使用过正则化的lora(包括使用dreambooth得到的ckpt)在出图时,是不是正则化中的概念(比如1girl、该视频中定义的斑点,脸)必定会出现,然后接下来sd会根据“学习”到的“知识”在该概念的“四周”进行图像的生成并尽可能去接近训练图。反言之在训练的时候,训练图会去对正则化图,以找到训练图与正则化图中均出现的概念,并将该概念的细节进行“学习”。 如上述猜测正确 那如果我要训练一个有“菱形瞳孔”、“持弓箭”,“穿着特定礼服”的女性角色(定名称为:E)则训练集和正则化图的组成是否如下: -train 训练数据集总文件夹 --E 训练集文件夹 ---x_elysia 该文件夹放置该人物的全身照、半身照,并在标记时去掉所有特征值,并添加”elysia eyes“, “elysia dress”作为其他概念的(强化?)触发词 ---y_eyes 该文件夹仅放置眼睛的特写 仅标记“elysia eyes” ---z_dress 该文件夹放置服装的特写 仅标记“elysia dress” --reg 正则化集文件夹 ---x_elysia 该文件夹放置使用1girl生成的图片 ---y_eyes 该文件夹放置该人物的头部特写(以让模型“知道”“eyes”训练集里面训练的是眼睛,并确定其位置),同时标记tag:head only,在出图时在negative prompt中添加该关键词以防止只出大头 ---z_dress 该文件夹放置该任务全身图(以让模型“知道”“dress”训练集里面训练的是衣服,并确定其位置)
  • 伊斯武:已三联前来提问:1.reg里的图片需要在每个图片对应的打标文本的最开头加关键词么?(例如训练p5立绘画风的画风lora训练集文件夹命名为“10_p5_style style”;reg里的文件夹命名为“1_style”,那么需要在reg图片的打标文本开头加上style么?) 2.同上述例子中,reg里的图片如何挑选,是最好挑选别的画风的同样人物的图片(如p5实际游戏中3d模型的游戏角色截图),还是说任意其他画风的图片都可以(如任意风格的风景照或任意人物图片)?
  • 邵莲碧:上高中的时候玩炉石天天搁旅法师营地看up,没想到好几年过去会在这里再见[思考]
  • nmbg8507:好家伙,炉石完了之后青龙来这里了吗,以前旅法师营地经常看到你哈哈
  • werran:青龙你忘了说训练文件里要加一条 $reg_data_dir = " " # directory for regularization images | 正则化数据集路径,默认不使用正则化图像。