GameMale
登陆 / 注册 搜索

USERCENTER

SEARCHSITE

搜索

查看: 818701|回复: 114
收起左侧

[AI 生成] 【AI绘画入门2】LoRA模型+controlnet指定人物姿势

    [复制链接] |关注本帖

艾吉奥时间尽头的虚空蒂法·洛克哈特你的答案『随时随地开启!』生金蛋的鹅暗影烈焰虎克船长

    本帖最后由 领带骑士 于 2023-3-31 17:00 编辑






    吓死了,刚刚一发帖发现帖子内容只有两张图,

    吓得我赶紧锁帖子重新编辑,发现是有两张图片冲突了
    奇奇怪怪的bug怎么这么多

    【AI绘画】快速入门,使用colab在线运行SD,C站使用指引
    既然水都水了,追求刺激那就贯彻到底咯(

    1.模型介绍
    B站很多视频都有介绍,直接省流了
    对于一次文生图来说:
    ckpt:底模型,必须的
    vae:用了底模型配套的vae模型会更好看
    LoRA等:可有可无



    2.LoRA模型的使用(Embedding、Hypernetwork同理)
    2.1        如果你在c站找到的模型是LoRA类型的
    比如我想要用这个Asianmale模型
    首先查看一下底模型是什么
    看看他模型介绍部分说了什么:
    初始版本,主要为亚洲男性考虑,没有处理好衣服数据,lora 权重过大时,会导致衣服变褶皱,周边会出现彩色噪点。 lora 权重太小,脸型修饰不够,使用的时候酌情设置权重值,正在重新训练中......
    看来没啥需要注意的
    2.2        底模型+LoRA模型下载
    这部分的操作和快速入门是一样的,不赘述了
    唯一要注意两个地方
    2.3刷新模型列表,切换底模型
    2.4在prompt中添加Lora标签即可生效。
    至于具体权重是多少,官方用0.6那咱们也跟着用就是了

    3.使用controlnet指定人物姿势
    3.1回到colab的github页,这次选择stable版本
    (如果你是本地部署的stable diffusion,参考这个安装controlnet:https://www.bilibili.com/read/cv21829826
    如果你按照快速入门的步骤,先运行了lite版本,现在直接运行会报错
    直接复制stable colab的所有代码,回到lite colab,暂停正在运行的代码块,新建代码块,粘贴运行
    可别直接断开并删除运行时,不然又要重新下载安装环境了
    最多可以运行12小时,在此期间不小心断开连接,直接点击右上角的重新连接就好了

    3.2按照文生图的步骤填好参数。
    这里我使用image Info读取刚刚保存的图片的参数,点击text toimg自动填充
    3.3配置controlnet
    刚刚colab限额到了,只好用本地部署的stable diffusion示范
    可以通过图片指定姿势,有时候可能会骨骼识别错误,最好使用真人(福瑞图直接识别不了)

    点击下方按钮可以预览识别结果
    3.4生成图片
    成功指定了姿势,右边那张图是骨骼识别结果。

    3.5其他同理,切换预处理+模型就行,这里直接截图了

    似乎可以用来线稿上色,没试过


    都看到这了,求求给个追随

    单选投票, 共有 449 人参与投票

    距结束还有: 409 天19 小时34 分钟

    14.48% (65)
    1.78% (8)
    83.74% (376)
    您所在的用户组没有投票权限

    本帖子中包含更多资源

    您需要 登录 才可以下载或查看,没有账号?立即注册

    x

    评分

    参与人数 43血液 +41 追随 +42 堕落 +6 收起 理由
    jy02724408 + 1
    AlexToi + 1 很给力!
    拳击虎 + 1 + 1 很给力!
    ldaz + 1
    HiXiOi + 3 + 1
    EmmAnuel621 + 1 神马都是浮云
    0-0+ + 1
    victory2 + 1
    tien94211 + 1 很给力!
    cmere + 1

    查看全部评分

    已有2人关注本帖

    zx4021831时间|

    本帖被以下淘专辑推荐:

    回复

    使用道具 举报

    模擬人生4

      回复

      使用道具 举报

      征服之王被释放的灵魂死灵之书圣甲虫秘典破损的旧书吃饱金币的Doge生金蛋的鹅内森·德雷克果体76Futūrum(未来)

        回复

        使用道具 举报

        实现梦想業火死鬥魔法不朽·传奇不熄卡洛斯·奥利维拉白野威十年一梦官复原职男巫之歌永浴爱河虚空之海的鲸

          回复

          使用道具 举报

          爬行植物Ⓛ『南瓜拿铁』爬行植物Ⓡ内森·德雷克卡洛斯·奥利维拉人到中年但丁安德森‧戴维斯索尔·奥丁森丹·雷诺斯

            回复

            使用道具 举报

            遗留之人的城堡不洁圣子冒险专用绳索近地夜航真·天使之赐龙鳞石岛屿探险家赛博朋克2077王者之盾保加利亚妖王

              回复

              使用道具 举报

              百相千面-晦永远的克叔業火死鬥实现梦想官复原职虚空之海的鲸Zootopia幸运女神的微笑『逆境中的幸运女神』御医神兔

                回复

                使用道具 举报

                『召唤好运的角笛』诡案谜集·黑夜之星牌中小丑 · 呼之欲出

                  AncL 发表于 2023-3-28 16:20:27 | 显示全部楼层 |取消关注该作者的回复
                  回复

                  使用道具 举报

                  『迷翳之中』『星河碎片』『灰域来音』泰比里厄斯岛田源氏業火死鬥白野威落雪勇者与龙的传说-封面遍江云霞

                    回复

                    使用道具 举报

                    大天使之杖十周年扭蛋 - 橙邪恶圣杯

                      回复

                      使用道具 举报

                      男巫之歌内森·德雷克『私有海域』裸体克里斯双向圣杯:焕然意志极·龙の意【圣诞限定】心心念念小雪人小小舞台御医神兔永浴爱河

                        controlnet写的是支持边缘图、分割图、深度图做引导生成的
                        (刚去了解到免费版只能12小时,能挂载google drive但免费也就15g
                        回复

                        使用道具 举报

                        我的天使GM吸血伯爵吃饱金币的Doge阿拉喵?神灯和你一起飞行的皮卡丘小小舞台永浴爱河

                          已经……无所谓了(´×ω×`)咱连入门都没看懂,就马上发进阶了……不知道还有没有最终或入土教程~
                          回复

                          使用道具 举报

                          压箱底的泡面幽浮起司煲图腾饼干『酒馆蛋煲』『南瓜拿铁』『钟楼盐水棒冰』

                            回复

                            使用道具 举报

                            镜中小鸟香蕉特饮40x43 隐形➀香喷喷的烤鸡月影狼

                              回复

                              使用道具 举报

                              诺克提斯·路西斯·伽拉姆Forever Titanic業火死鬥钢铁侠永远的克叔极·龙の意死灵之书卡利亚权杖虚空之海的鲸史莱姆牧场

                                回复

                                使用道具 举报

                                小小舞台『 弗霖的琴』虚空之海的鲸業火死鬥男巫之歌泰比里厄斯【夏日限定】夏日的泰凯斯史莱姆牧场崩朽之青铜龙王岛田源氏

                                  详细教程好赞,先给评分再仔细看看
                                  另外发帖的话很推荐用纯文字模式多检查看看,还有绝对不要用论坛自带表情以外的emoji表情啥的
                                  回复

                                  使用道具 举报

                                  杰夫‧莫罗丹·雷诺斯秘密森林风物长宜森林羊男野兽之子漂洋小船

                                    回复

                                    使用道具 举报

                                    不灭的蓝宝石『不败之花』时间尽头的虚空SCP-s-1889-第一页安静的海边火柴 - Gamemale美恐:启程落雪勇者与龙的传说-封面霍格沃茨特快列车

                                      有说是webui能画更多还是什么,就没选lora,后面才知道我多虑了,渣机带不起来,我也不会念咒
                                      总之有新手教程真的太棒惹~
                                      回复

                                      使用道具 举报

                                      脉律辐石雪王的心脏『星河碎片』『灰域来音』预知水晶球炽天使之拥『伊黎丝的赞词』纯真护剑『随时随地开启!』『随时随地开启!』

                                        回复

                                        使用道具 举报

                                        不曾寄出的信件小小舞台漂洋小船『随时随地开启!』冒险用指南针破损的旧书丛林的鸟飞走了雪王的心脏人鱼之泪幽灵竹筒

                                          回复

                                          使用道具 举报

                                          您需要登录后才可以回帖 登录 | 立即注册

                                          本版积分规则

                                          文字版|手机版|小黑屋|GameMale

                                          GMT+8, 2024-11-6 21:25 , Processed in 0.175963 second(s), 149 queries , Redis On.

                                          Copyright © 2013-2024 GameMale

                                          All Rights Reserved.

                                          快速回复 返回列表