本帖最后由 领带骑士 于 2023-3-31 17:00 编辑
吓死了,刚刚一发帖发现帖子内容只有两张图,
吓得我赶紧锁帖子重新编辑,发现是有两张图片冲突了
奇奇怪怪的bug怎么这么多
【AI绘画】快速入门,使用colab在线运行SD,C站使用指引
既然水都水了,追求刺激那就贯彻到底咯(
1.模型介绍B站很多视频都有介绍,直接省流了 对于一次文生图来说: ckpt:底模型,必须的 vae:用了底模型配套的vae模型会更好看 LoRA等:可有可无
2.LoRA模型的使用(Embedding、Hypernetwork同理)2.1 如果你在c站找到的模型是LoRA类型的 比如我想要用这个Asianmale模型 首先查看一下底模型是什么 看看他模型介绍部分说了什么: 初始版本,主要为亚洲男性考虑,没有处理好衣服数据,lora 权重过大时,会导致衣服变褶皱,周边会出现彩色噪点。 lora 权重太小,脸型修饰不够,使用的时候酌情设置权重值,正在重新训练中...... 看来没啥需要注意的 2.2 底模型+LoRA模型下载 这部分的操作和快速入门是一样的,不赘述了 唯一要注意两个地方 2.3刷新模型列表,切换底模型 2.4在prompt中添加Lora标签即可生效。 至于具体权重是多少,官方用0.6那咱们也跟着用就是了
3.使用controlnet指定人物姿势
3.1回到colab的github页,这次选择stable版本 如果你按照快速入门的步骤,先运行了lite版本,现在直接运行会报错 直接复制stable colab的所有代码,回到lite colab,暂停正在运行的代码块,新建代码块,粘贴运行 可别直接断开并删除运行时,不然又要重新下载安装环境了 最多可以运行12小时,在此期间不小心断开连接,直接点击右上角的重新连接就好了
3.2按照文生图的步骤填好参数。 这里我使用image Info读取刚刚保存的图片的参数,点击text toimg自动填充 3.3配置controlnet 刚刚colab限额到了,只好用本地部署的stable diffusion示范 可以通过图片指定姿势,有时候可能会骨骼识别错误,最好使用真人(福瑞图直接识别不了)
3.4生成图片 成功指定了姿势,右边那张图是骨骼识别结果。
3.5其他同理,切换预处理+模型就行,这里直接截图了
似乎可以用来线稿上色,没试过
都看到这了,求求给个追随
|