GameMale
登陆 / 注册 搜索

USERCENTER

SEARCHSITE

搜索

查看: 12965|回复: 140
收起左侧

[AI 生成] 【AI绘画入门4】角色定制白嫖colab训练LoRA模型简单无脑!

    [复制链接] |关注本帖

艾吉奥小丑与格雷与星光璀璨时间尽头的虚空蒂法·洛克哈特你的答案『随时随地开启!』生金蛋的鹅暗影烈焰虎克船长.

    本帖最后由 领带骑士 于 2023-4-3 22:47 编辑

    A训练前的必要准备
    1.    准备一些图片

    2.    图片预处理: 裁切统一尺寸+自动识别tag
    Colab上的lite版本sd也可以预处理,界面都一样的,这里直接用本地的了
    2.1设置好图片地址和预处理结果的输出地址,
    2.2设置裁切的尺寸
    2.3勾选自动分割+deeppooru
    2.4完成后检查裁切的图片是否符合
    删掉多余的图片,不满意的就自己手动裁切一下(我傻傻自己手动了一下午)
    输出结果:


    3.    Tag修正:
    下载tag批量编辑工具:

    3.1.    由于布莱泽有3种姿态:穿盔甲、只穿斗篷、裸上身,这里分了3个文件夹分别存放3类图片。

    3.2.    删tag:
    用工具打开数据集文件夹,需要记住布莱泽的哪些特征,就在右侧统一删掉哪些tag。比如muscluar,wolf,black_fur等。
    这是因为tag里的特征不会被Lora记住,所以要删掉所有人物外观相关的tag。

    3.3.    添加tag
    没有识别出来的,与人物特征无关的tag。像画面构成、角度、动作等。
    这一步需要一张张的检查,就略过不展示了
    3.4.    添加触发词:
    首先重命名文件夹:
    8_blaidd_armour、
    8_blaidd_cape、
    8_blaidd_topless,
    8代表重复训练次数。分文件夹只是为了区分要训练素材的训练次数,文件夹后面的名字是无所谓的
    然后每个文件夹里的图片都打上文件夹名字上对应的tag
    这些tag就是触发词:
    训练完后,我们输入blaidd,armour就能生成穿着盔甲的布莱泽;
    输入blaidd,topless就能生成上身赤裸的布莱泽。



    B.免费使用colab在线训练Lora模型

    预处理完毕后,
    打开WSH032大佬的colab笔记本,接下来的操作非常无脑


    1.上传数据集到谷歌硬盘:
    注意文件路径

    2.挂载谷歌硬盘、安装训练所需依赖:
    逐步点击运行4.1、4.2、5.1、5.2、5.4的代码块
    (5.3不需要,它是给正则集打tag,我们现在只有训练集)


    3.下载底模模型
    这里决定选用gay621,右键复制下载链接
    第一个选自定义,(这里当时没注意选的是sd1.5= =所以下面的结果是基于sd1.5的)
    中间填上模型下载地址
    Gay621是ckpt模型,所以第三个选ckpt
    点击运行6.1代码块

    4. 设置LoRA模型的名字、图片尺寸
    这里设置成blaidd,512*512,其余不需要动
    运行7.1代码块
    (7.2跳过,7.3是继续训练现有的LoRA模型,现在啥都没有呢,也跳过)

    5.开始训练
    (8.1是训练过程中实时查看损失率和学习率,看了也没用,跳过)
    点击8.2代码块开始训练
    然后去干点别的吧,默认的15个epoch我这里大概挂了40分钟结束了

    6.训练完成,使用保存在谷歌硬盘的lora模型测试效果



    随便打开一个lite版本的SD
    挂载谷歌网盘,可以看到训练好的blaidd模型。(621这个模型是我自己复制的)



    将blaidd模型复制到SD的model文件夹里,它才能知道有这个模型


    创建代码块复制以下命令,点击执行

    同理你可以将网盘里的其他模型复制到colab里
    1. !cp -r /content/drive/MyDrive/Lora/output/blaidd.safetensors  /content/stable-diffusion-webui/models/Lora
    复制代码
    1. !cp -r /content/drive/MyDrive/gay621.ckpt  /content/stable-diffusion-webui/models/Stable-diffusion
    复制代码
    然后如果你不想使用sd1.4ckpt,可以修改这一行

    找到最后一个aria2c,右边两个是模型下载链接和模型名称,
    中间就修改为你需要的模型的下载地址,或者是你已经复制到colab中的底模型地址
    右边修改为你自己的模型名称(到时webui就会显示这个名字)
    运行起来测试lora模型

    结果测试
    测试一下训练半小时的结果:
    上colab设置好gay621和blaidd lora模型后,
    正面prompt设置成<lora:blaidd:0.8>,blaidd,cape,penis,muscularmale wolf,
    负面prompt和其他参数按照官方推荐来:
    <lora:blaidd:0.8>,blaidd,cape,weapon,penis,muscularmale wolf,
    <lora:blaidd:0.8>,blaidd,armour,weapon,penis,muscularmale wolf,

    topless的生成到一半限额到了,强制下线,所以无了

    训练集和lora模型
    https://drive.google.com/drive/f ... 6gfJ?usp=share_link
    1.素材选择上有点欠缺
    2.模型还需要更多的训练
    3.文生图的时候prompt设置的太简陋,参数也是随便调的,没测试过

    但这次训练只是水贴需要,不出意外的话应该没啥后续训练了
    有兴趣的坛友可以根据喜欢的底模型(比如ye18)和素材继续训练布莱泽的模型


    C.使用已有的lora模型再次训练

    重复B第5点前的所有操作


    在7.3,设置从现有模型开始训练



    在7.4可以选择优化器
    如果想要训练时间长一点,可以把epoch往上挑


    然后到8.2开始训练




    人物lora模型训练基本的流程大致就是这样了
    都看到这里了,可以求一个追随吗,感谢









    单选投票, 共有 579 人参与投票

    距结束还有: 398 天50 分钟

    79.45% (460)
    20.55% (119)
    您所在的用户组没有投票权限

    本帖子中包含更多资源

    您需要 登录 才可以下载或查看,没有账号?立即注册

    x

    评分

    参与人数 51血液 +114 追随 +48 堕落 +15 收起 理由
    星之子 + 3 + 1 + 1
    空心不吃香菜 + 1 很给力!
    一万只小仓鼠 + 2 + 1 很给力!
    alblink + 1
    xianglin12 + 1 + 1
    开始恨了 + 1
    季夏的呆橘 + 1
    ldaz + 1
    DeanL + 1
    e92144454 + 1

    查看全部评分

    已有3人关注本帖

    黑丝男时间|blaiddsslut

    本帖被以下淘专辑推荐:

    回复

    使用道具 举报

    幸运女神的微笑『南瓜拿铁』『逆境中的幸运女神』『钟楼盐水棒冰』御医神兔冒险专用绳索神人的编制发Forever Titanic金牌矿工无尽的怀表

      就是说太贴心了,教的真的很细致了
      学会必然在绘画区肝肝
      回复

      使用道具 举报

      安德森‧戴维斯.安德鲁·库珀Drover.冒险专用绳索卡利亚权杖真理世界不朽之恋“腐败女神”玛莲妮亚

        谢谢楼主分享。没有本命角色,但是感觉同理可以用来训练人工智障理解一些特殊的服装或者动作方便我继续大炼狗奴,哦说错了,男人
        不然输入on his knees人工智障老给我整个蹲着的人,还有输入wearing a dog collar不是画只狗在旁边就是加个口水兜,直接把我气孕
        回复

        使用道具 举报

        诺克提斯·路西斯·伽拉姆Forever Titanic業火死鬥钢铁侠永远的克叔极·龙の意死灵之书卡利亚权杖虚空之海的鲸史莱姆牧场

          事前准备也需要蛮多精力的
          顺便布莱泽的大丁丁没打码惹

          评分

          参与人数 1血液 +5 追随 +1 收起 理由
          PUCK + 5 + 1 赞一个!

          查看全部评分

          回复

          使用道具 举报

          『私有海域』

            回复

            使用道具 举报

            克莱夫・罗兹菲尔德巴哈姆特约书亚・罗兹菲尔德吉尔·沃瑞克最终幻想XVI

              看了楼主的上个贴子和这贴AI教学让我深刻认知到跑图还很需要配置
              回复

              使用道具 举报

              【新手友好】昆進香喷喷的烤鸡腐化龙幼崽驯化黑龙幼崽驯化红龙幼崽森林羊男GM論壇榮譽勛章牧羊人

                回复

                使用道具 举报

                亚索月影狼晓月终焉旅行骰子!卡利亚权杖

                  回复

                  使用道具 举报

                  捡到了肥皂变骚喷雾千杯不醉收到情书小丑与格雷与星光璀璨粉猪猪储蓄罐㊖業火死鬥永浴爱河泰比里厄斯虚空之海的鲸

                    还没自己跑过lora,据说相当吃配置
                    这几个布莱泽看起来憨憨的,不知道是不是眼睛小的原因
                    回复

                    使用道具 举报

                    征服之王被释放的灵魂死灵之书圣甲虫秘典破损的旧书吃饱金币的Doge生金蛋的鹅内森·德雷克果体76Futūrum(未来)

                      回复

                      使用道具 举报

                      人到中年希尔瓦娜斯·风行者丹妮莉丝·坦格利安蒂法·洛克哈特山村贞子Drover.双重身份内在男色时代玄生万物

                        厉害,坐等大佬的现成模型。个人感觉ai画得犬科比猫科好一些
                        回复

                        使用道具 举报

                        狩猎用小刀炽天使之拥丛林的鸟飞走了失去力量的白狼碎裂的储蓄罐卡洛斯·奥利维拉男用贞操带破损的旧书雪王的心脏和你一起飞行的皮卡丘

                          回复

                          使用道具 举报

                          『迷翳之中』『星河碎片』『灰域来音』泰比里厄斯岛田源氏業火死鬥白野威落雪勇者与龙的传说-封面遍江云霞

                            感觉621模型那张的清晰度在需要打码和不需要打码之间反复横跳
                            回复

                            使用道具 举报

                            GM論壇榮譽勛章艾德尔堕落之舞Doc陷阱杀手阿尔伯特·威斯克驯化红龙幼崽林中松鼠达拉然

                              回复

                              使用道具 举报

                              桑克瑞德·沃特斯索尔·奥丁森.阿列克西欧斯(Alexios)镜中小鸟钢铁勇士弯刀魯杰羅·弗雷迪.沃特·沙利文Scott Ryder恶魔阿蕾莎

                                很是详细的教学,但是看起来还是好麻烦的样子,我这种笨宝应该学不会
                                回复

                                使用道具 举报

                                岛田源氏巴比伦辞典火柴 - Gamemale艾吉奥小小舞台漂洋小船不曾寄出的信件星芒戒指虎克船长.神灯.

                                  楼主好厉害!能帮我的兽设弄个ai绘图嘛已追随
                                  回复

                                  使用道具 举报

                                  丹雀衔五穗,人间始丰登金猪猪储蓄罐㊖小丑与格雷与星光璀璨遗留之人的城堡不洁圣子冒险专用绳索近地夜航真·天使之赐龙鳞石岛屿探险家

                                    回复

                                    使用道具 举报

                                    特殊-家园卫士Ⓡ特殊-家园卫士Ⓛ

                                      wnda 发表于 2023-3-31 08:08:04 | 显示全部楼层 |取消关注该作者的回复
                                      回复

                                      使用道具 举报

                                      瑞雪兆丰年,生灵万物新索尔·奥丁森.亚瑟·库瑞(海王).BIG BOSS杰西·麦克雷莱因哈特·威尔海姆岛田半藏索林·临终一役王者之盾守望者雷涅尔

                                        回复

                                        使用道具 举报

                                        男巫之歌内森·德雷克『私有海域』裸体克里斯双向圣杯:焕然意志极·龙の意【圣诞限定】心心念念小雪人小小舞台御医神兔永浴爱河

                                          训练单一人物也很费劲啊x
                                          学会打标签,你已经出成熟的数据女工了x
                                          回复

                                          使用道具 举报

                                          您需要登录后才可以回帖 登录 | 立即注册

                                          本版积分规则

                                          文字版|手机版|小黑屋|GameMale

                                          GMT+8, 2024-11-21 21:56 , Processed in 0.148523 second(s), 149 queries , Redis On.

                                          Copyright © 2013-2024 GameMale

                                          All Rights Reserved.

                                          快速回复 返回列表