抛砖引玉，初试AI绘图的一点个人经验

silencedonkey · 发表于 2022-12-5 16:47:21

本帖最后由 silencedonkey 于 2023-3-7 14:28 编辑

哈喽大家好，这里是潜水已久的新人第一次发帖，有点小紧张，希望大佬们支持~

前两天在版里看到 @ez121502 的AI绘图，感觉相当惊艳，就想自己上手试一下，照猫画虎的训练了一个模型出来，希望分享一下初步成果和出图流程方面的一点心得。各位有什么经验也欢迎分享指正，一起把AI调教的更好

。开始之前参考了本版很多大佬的帖子，感谢各位的无私奉献。

模型训练同样用的杯面大大的图（一直很喜欢，太戳XP了）和一些画风相近的，hypernetwork跑了20000 iteration （embedding总是效果不好，可能打开方式不对）。下面是几张效果比较好的图：

下面结合示例总结一下个人经验向出图流程。关于prompt怎么选就不具体介绍了，论坛里也有很多大佬分享经验，这里面水相当深

，不过大致根据自己喜好选择就行。一开始为了快速筛选可以用小分辨率快速跑一组图（显存小的话用多批次少批量），从里面选出觉得不错有潜力细化的。

继续细化的话个人实验下来更推荐直接用 imgtoimg 处理（大佬帖子里有介绍https://www.gamemale.com/forum.php?mod=viewthread&tid=97593&extra=page%3D2%26filter%3Dtypeid%26typeid%3D844），比用同样的随机种子增大分辨率跑更多轮次效果好很多。主要优势有：1. 跑更多轮次很有可能大幅度改变原图结构，经常有原来还不错的地方被改坏。2. 不同于同样种子的固定输出，可以生成多张候选图，比较起来更大概率选出你想要的结果。3.中间可以根据样本加更贴合的prompt，也可以灵活调整重绘幅度。

示例一：出生就比较正常的图
1.ai知道自己画不好手，就机智的藏了起来，初始图整体效果还不错。

2.用同样的prompt放入imgtoimg进行细化，调整成更高分辨率并训练更多轮次。如果原图没问题的话重绘幅度可以设比较小的值（0.2-0.3）。这一步有可能变化很小，不过没关系，能在高分辨率下保持类似水平的细节就好。

3.个人推荐如果改了分辨率的话，一定要把结果再imgtoimg细化一次，能大幅增加细节。这里加入水滴关键词再跑一次（营造雨中湿身氛围），生成成品图，可以看出来比上一步精细不少（胸上的水流居然相当流畅，hso）。

示例二：不幸召唤出古神
1.下面这张上半身和手都画的都还不错，但孩子你裤子呢，还有这极限外八字柔韧度远胜常人。决定用局部重绘拯救一下。

2.用局部重绘给孩子穿上新裤子和鞋子。全部重画可选择填充蒙版和高重绘幅度（保持原位置可选0.8-0.9，调整位置可选1），关键词可以只包含要重画的部分（比如sneakers 和 shorts，一次只画一个防止搞混）。这一步可以多生成几个候选，容易出现错位，挑出比较合适的。

3.同样用局部重绘清理地上多余的部分（road）。

4.精髓就是用所有初始prompt再imgtoimg细化一次（小重绘幅度），能提升很多细节。另外上张图重绘的脚部衔接不自然，可以一并解决。

本次分享就到这里了，刚接触ai绘图没几天感觉里面大有可为，仔细调教下质量相当不错，但想生成一张符合心意的图还需要极大的耐心。另附上本帖里的高清大图和其他细化中间图下载链接，文件名就是使用的正面prompt，感兴趣的可以下载比较一下效果。各位大佬有什么改进建议和心得也欢迎交流分享！接下来也想尝试不同画风还有兽人。本来想为了色色来着可惜不太会调教JJ的画法，另外ai是不是只能生成boki状态，试了好多关键词都很难生成正常状态

，求大佬指教！