【AI绘画】训练LoRA模型最重要的一环:打标签-【AI绘画】训练LoRA模型最重要的一环:打标签

AID:
CID:
视频图片:
作者头像:
弹幕地址:
视频描述:

热门回复:

  • 红旗下好少年:个人理解:up主的意思是,应该要打那些“可替换”的tag。 比方说训练一个人像,那么衣服样式,衣服颜色,鞋子都是可以替换的,应该加入tag中。还比如照片的角度是正面还是侧面,背景里偶尔出现个篮球这种,都应该加入tag里,因为篮球并不是绑定在某个人身上的。 但一个人眼睛的颜色,头发的长度,头发的颜色,通常是不会变的,它们应该被直接包含进人物中,而不是作为一个分离的特征独立出来,所以,不应该加入tag中
  • 米洛克·the·miracle:总结一下,训练就是利用元素守恒定律求解方程x的解 lora模型(x)+tag(y)=训练图 假设一个极端情况,我们把tag写得非常详细,完全彻底的描述了训练图的一切元素,此时等式可写为 lora模型(未知数x)+tag(训练图)=训练图 此时训练,或者说求解出来的lora模型等于0,空的,这个模型啥也没有 因此我们假设要训练嘉然的lora,也就是x=嘉然的一切元素,此时等式应写为 lora模型(嘉然的一切元素)+tag(y)=训练图 求解 tag(y)=训练图-lora模型(嘉然的一切元素) 也因此,我们应当在系统自动识别出的训练图的元素中,删去跟嘉然相关的一切元素 当然,系统识别肯定不够精准完美,这就导致系统生成的tag本身不可能完全覆盖训练图的所有元素,所以即使我们删去了生成的tag里的嘉然元素,那些没有别识别出来的元素如果我们不手动添加,在训练(求解)的过程中,就会被计算到lora里,一定程度上污染lora,动作僵硬,角度固定或者一定带有什么奇怪的特性,大多就是这个原因导致的
  • 二个吧唧:其实不太建议删掉角色特征呢…… 理论上ai即使是标出了你的服装,帽子,纹身等等,他也是学到了形状细节的,例如给胡桃打hat,基本必定是带着花一起出的 事后出图的时候随便拿一张角色图反推的词条都够用了 但是全删掉会导致角色特征过于固定,比如嘉然你出个短发还好,我训练的猎空当时尝试删特征,后来想把她脸上的防风镜拿下来必须反向拉倒极大的权重,已经会影响脸部了…… 而且多个服装同时训练,如果服装特征都删掉使用固定提示词,他会将一些极小的小零件混起来出……这个是在尝试刻晴的双皮肤时体验的……
  • 肖琴师:“删除与想要实现的效果相关的词条”。让我想起了李连杰的倚天屠龙记……“无忌,为师讲的你记没记住啊?”“全忘了。”“好,你就记住,打他们md!”
  • foreverSR:要变的tag就留下,不变的tag就去掉。

http://acg.ibilibili.com/cms/yirenzhixia/7.html