search

boholder / boholder.github.io

BoHolder's site: about my crafts,thought,etc Powered by [Hugo], theme is [hugo MemE]
4 stars 0 forks source link

blogs/train-a-lora-model-for-an-anime-character/ #10

Open utterances-bot opened 1 year ago

utterances-bot commented 1 year ago

为anime角色训练LoRA模型 | BoHolder的网站：博客，小玩意及其他

从准备数据集到训练

https://boholder.github.io/blogs/train-a-lora-model-for-an-anime-character/

boholder commented 1 year ago

最近网络上推出了anything-v5。我发现它与anything-v3的作者相同，与anything-v4.5的作者不同。怎么回事？根据我的搜索结果，似乎是anything-v4/anything-v4.5的作者只是抄袭了anything-3的名字，名不副实。我分辨不出这些模型的区别，但我选择将信息留在评论里供读者们自行判断。

https://civitai.com/models/9409?commentId=100226&modal=commentThread https://old.reddit.com/r/StableDiffusion/comments/124apoy/anything_v5_is_out_on_civitai_the_real_one/ https://old.reddit.com/r/StableDiffusion/comments/10kr1m1/current_state_of_anythingv3/

boholder commented 1 year ago

找到了一个“从零”炼Original Character的方法：controlnet openpose+SD不稳定，但是不会依赖外部软件。直接找一个能捏3D模型的工具（Custom Order Maid 3D2，Koikatsu，或者我用的较小众的Insult Order），捏人，从不同角度截图。 结果是模型真的学到了角色的细节，和游戏的画风（涂色、光影等）。

boholder commented 1 year ago

Stable Diffusion 训练指南 (LyCORIS) - EricFu ，包含大量训练所需的理论知识，推荐动手前先读一下。我很感激他把这些知识提炼并写出来。 http://ericfu.me/stable-diffusion-finetune-guide/

boholder commented 1 year ago

对了，我又炼了一个OC。是直接用一个3D游戏捏了人，放在预览里摆姿势截图来构造数据集的。我觉得这种方式挺方便的，游戏二次元角色可以选CM3d2啦，koikatsu，真人就I社的游戏选一个呗，HonkeySelect之类。有个不好的结果是，游戏里的光影会很大地继承到fine-turing模型里，比如游戏的光影比较油腻，那用训练出的模型生成的图的角色光影也比较油腻。所以截图时记得把能关的光影设置关一下。

jidxjlove commented 3 weeks ago

博主你好，关于“无效操作：扩大图片尺寸到正方形”这一节，我想请教一下割图这一部分你后来是怎么做的？ 我现在也遇到了一样的问题，本来就十分稀少的官设全身图，一割鞋袜部分就没了，如果整个人拉出来放到一个正方形里，后面调整大小到512*512之后就变得更小了一样看不清。 全身图都单独割一张只有下半身没有上半身的图出来一起放进数据集这个方法可行吗？

boholder commented 3 weeks ago

全身图都单独割一张只有下半身没有上半身的图出来一起放进数据集这个方法可行吗？

这个没试过，但是我用脑子想想，是不推荐的，因为相当于你练的lora里下半身是被独立学习到的，可能关联不到角色的关键字。但是可以试试，没准可以作为生成裤袜的风格样式之类的特征。

还可以参考这篇博客里的图片准备步骤

http://ericfu.me/stable-diffusion-finetune-guide/