3/17 问题
- issac zhang
- Mar 17, 2024
- 2 min read
Updated: Mar 19, 2024
查阅过大量的教程和资料之后发现没有相应的编程基础去尝试自己训练Dreambooth难度相当大，主要是网络上资料太少，没有现成的资料可以直接套用的，所以需要自己去一个个去试参数。虽然可以尝试结合不同的教程和资料去训练，但是这样就会导致训练出来的Dreambooth或者是Lora的质量达不到要求，时间成本也比较巨大。
现在可能的解决方案就是：先把现有的资料结合起来去训练一个Dreambooth看看效果如何。
或者是花钱去问..
问题：
0.我想要的这种设想有没有实现的可能？
-第一种设想，通过现有的三维流程弄出低模作为绘画&Ai的辅助，然后画出二维动画，再通过Ipadapter结合lora和dreambooth的情况下直接起到类似于渲染的效果。
-第二种设想，如果第一种路线最后被证实不可行（比如这个版画风格训练出来的大模型实在达不到想要的最终效果），那么是否可能训练出大模型结合controlnet可以生成动画或者风格的参考...?
murmur:
murmur:
1.怎么选取Lora训练集
-训练风格的话，是不是一种风格图片会更好一点 (Lora图片选同风格/人物的)
-除了网上说的那些标准之外，还有一些什么选取图片的技巧吗？
-假如我想训练版画风格的Lora，但是我的主角是一个人和一条龙...我需要针对性的去加入这些训练集图片吗？
-我要像其他的up训练lora一样 裁剪、翻转吗？
-打tag我这种可以这样打吗？要简单的还是复杂细致一点的？（关键词有点长，因为识别能力有限，打tag的时候别太复杂，人多直接就写characters。可以试试风格归类，不打关键词直接训练LORA）
2.我怎么判断训练出来的效果咋样啊？
-我为什么生成的这些图片video这么抽象啊？为什么同样流程换了不同的lora和大模型就效果完全不一样了？
-现在这个xyz图咋看效果啊？（先用一样的数据集的关键词和seed采样器，然后看效果如何，再用其他不同关键词去测试泛化能力）
-为什么老师生成的这个图像质量这么好呢？
3.Lora和Dreambooth的区别到底在哪？准备训练集是不是有所不同？
4.Dreambooth该怎么训练？sdxl没有，那么1.5教程呢？可以推荐点吗
-正则化图像我应该怎么选？以我这种目的需要吗？（画风可以不需要）
-我自己试着用1.5和lora的参数设置去训练了一个，参数有那么重要的吗？
-现在还需要正方形1024*1024吗？（能裁就裁，优先级可以放低一点）
5.Ai动画是不是得了解comfy ui的每一个节点才能有效运用？
-我看到网络上有非常复杂的教程能够达到我想要的这种效果，这个咋弄
Comments