会员登录 - 用户注册 - 设为首页 - 加入收藏 - 网站地图 如何将ControlNet与SDXL模型配合使用!

如何将ControlNet与SDXL模型配合使用

时间:2024-07-02 04:07:06 来源:带水拖泥网 作者:电商 阅读:925次

如何将ControlNet与SDXL模型配合使用

众所周知SD1.5的模型ControlNet模型在SDXL上是不可以使用的,那我们使用SDXL时需要用到ControlNet怎么办呢,配合别担心这个教程以canny为例教你怎么将ControlNet和SDXL配合使用

更新我们的使用ControlNet

首先就是更新我们的ControlNet,在秋叶整合包中点击版本管理——扩展—— 一键更新就可以啦

也可以在WebUI中——扩展——已安装——检查更新——点击应用——重启WebUI

下载SDXL控制模型

您可以通过以下链接下载适用于 SDXL 的模型 ControlNet 模型。

lllyasviel/sd_control_collection at main (huggingface.co)

您可以将模型放入

stable-diffusion-webui\extensions\sd-webui-controlnet\models

stable-diffusion-webui\models\ControlNet

不过在下载的配合时候有这么多模型我们怎么选择呢

Canny模型

这边以Canny模型为例,我们不用全部下载,使用我这边已经测试了这些模型的模型生成效果和速度

速度测试

模型大小

虽然diffusers_xl_canny_full效果很好,但不幸的配合是,它是使用最大的。(2.5 千兆字节)而且生成的模型时间也比较久,如果你只在乎质量不在意时间并且电脑配置很好可以考虑这个

kohya_controllllite控制模型非常小。配合鉴于它们的使用体积小,它们的模型表现非常好。

对 Canny SDXL 的配合建议

如果您对它的大尺寸和较低的速度感到满意,请使用diffusers_xl_canny_full。使用

如果您需要更小、更快的模型并且可以接受风格的轻微变化,请使用kohya_controllllite_xl_canny。

使用sai_xl_canny_128lora以获得合理的文件大小,同时减少样式的更改。

控制权重参数对于生成良好的图像至关重要。大多数型号需要它低于 1。

-------------------------------------------------------------------------------------------

想要深入学习更多AI教程,请访问我们的教程网站:

AI教程_深度学习入门指南 - 站长素材 (cssjc.com)

(责任编辑:电商)

相关内容
  • 小米高管职务大变动!卢伟冰谈接手小米手机:巨大责任 光荣使命
  • Neuralink首例人类脑机接口手术后出问题:电极线脱落 数据捕获量减少
  • AlphaGo核心算法增强,7B模型数学能力直逼GPT-4,阿里大模型新研究火了
  • 一年做到品类销量,退货率仅5%,他们做对了什么?
  • 活了这么久 次见高铁10码速度缓慢行驶
  • 阿里云:通义千问API日调用量破亿 企业用户破9万
  • 法国AI公司Mistral AI即将完成新融资 估值飙升至60亿美元
  • 一年产能全卖光了:消息称小米汽车锁单破10万
推荐内容
  • 史上开源大模型重磅登场!破纪录公开代码/权重/数据集/训练全过程,AMD都能训
  • Air名不副实!苹果全新iPad Pro比Air更轻薄
  • 一部短剧带火一座城,是真风口还是伪概念?
  • 谷歌CEO皮查伊专访:AI浪潮尚处早期 已准备好打持久战
  • 支持Animatediff所有控制方式!AnimateLCM 4步推理即可生成视频
  • 瑞士名表遭遇断崖式大降温:3月出口额同比下降16%