【金字塔噪声,接近MJ的效果】最新LoRA训练进阶教程8-【金字塔噪声,接近MJ的效果】最新LoRA训练进阶教程8
热门回复:
- thexlee:最近我都有点不珍惜我的祖传硬币了[笑哭]
问下:fp16和bf16区别大吗?我每次跳参都变化了好几个参数。没注意对比,刚刚在视频里突然看到用的bf16,才想起来问问。我以前默认的bf16,这次秋叶更新webgui后,参数设置里只有fp16和fp32,我就选择的16。
等下回家看看这次用的DAd自动优化器的效果。
- 超级过气歌手:gradient那个开64然后金字塔梯度效果确实好,该亮的地方亮,该暗的暗,就是训练的时候loss压不下去、最低也就0.108
- kuugaoggy11:用的kohya_ss,开Multires noise 就提示不能与Noise offset同时用,但Noise offset我都调到0了。Gradient accumulate steps试着开到64,训练时间彪到上百小时。
- 轻井泽三:举例的图片不够明显,看不出来
- 灾厄之轮:青龙大佬,我在linux系统上使用您的.sh脚本时发现noise部分使用的
if 【 $noise_offset 】; then
extArgs+=("--noise_offset=$noise_offset");
elif 【 $multires_noise_iterations 】; then
extArgs+=("--multires_noise_iterations=$multires_noise_iterations");
extArgs+=("--multires_noise_discount=$multires_noise_discount");
第一个if里面的写法似乎只要存在noise_offset变量就会判断为True,而不是Noise_offset为0时设置为False。这导致Noise_offset填0的时候,multires_noise那两行代码都不会执行。请问这是不是一个bug?