【ComfyUI】使用ComfyUI玩SDXL的正确打开方式

当前位置:首页>设计文章>AIGC>【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
前情提要:上回书说到,我们下载并本地部署了ComfyUI的,利用简单的节点操作完成了我们的第一个工作流(【ComfyUI】本地部署ComfyUI上手指南,我就喜欢连连看,并且在这一集(【ComfyUI】Blender+Stable Diffusion!少年啊,这盛世如你所愿!(附中文汉化插件))中完成了对ComfyUI界面的汉化。今天,我们就要好好研究一下,如何在comfyUI中搭建SDXL的工作流,以及对比一下comfyUI和webUI在生成图片效率上的差别。

虽然现在已经有很多大佬分享了自己的工作流,但我还是建议大家能自己先手搓一下,一是为了搞懂SD的工作原理;二是因为自己连的工作流出图的那一刻,这个成就感是无与伦比的。就好像开汽车时,手动挡和自动挡的区别。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
下图就是我们之前做好的第一个文生图工作流,我们今天就在这个基础上进行改进,创造一个适合SDXL的双模型工作流。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式

首先看到“K采样器”这里,我们点击“右键”-“新建节点”-“采样器”,可以看到有两个选项,今天我们要使用的是“K采样器(高级)”。

【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
相比较而言,高级采样器会多一些调整参数,这些参数是我们今天要用到的。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式

因为SDXL需要用到base和refiner两套模型,所以我们要将模型节点和采样器节点分别复制一份下来。

【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
我们先来添加第一个base模型的采样器,参数设置如下:
  • 添加噪波:enable。确保打开,添加噪声。
  • 步数:30。迭代的总步数,比如我们设置为30步。
  • 结束降噪步数:20。这个代表的意思就是,前面20步将采用base模型进行运算。
  • 返回噪波:enable。这样就可以将剩下的噪声传递给下一个refiner模型。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
接着,将这个base的采样器传递到下一个refiner的采样器,参数设置如下:
  • 添加噪波:disable。这里关闭,因为是继承上一个采样器,所以不需要再添加噪声。
  • 运行后操作:fixed。相当于锁定随机种子的意思。
  • 步数:30。迭代的总步数,和之前保持一致。
  • 开始降噪步数:20。传递过来之后,是从第20步开始的。
  • 结束降噪步数:30。这个数字也可以保持默认,反正就是运行到结束。
  • 返回噪波:disable。不用返回了,到这一步已经结束了。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
但是,现在问题来了。如果我将refiner的模型连上提示词的话,第一个base模型的链接就会断开,怎么样才能让两个模型同时起作用呢?
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
我们来加入一个新节点,右键点击-【新建节点】-【实用工具】-【Primitive元节点】。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式

这个节点很有意思,它连接谁,就会变成谁的属性。

【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
在文本节点上单击右键,选择【转换文本为输入】。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
此时,文本节点上就多了一个文本的连接点。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
将元节点与文本节点相连接,这时元节点就变成了正向提示词的输入框。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
同理,可以将负向提示词框也用元节点代替。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
再复制出一套正负提示词节点,一套给base模型,一套给refiner模型。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
然后,base模型的那一套输出给第一个采样器节点,refiner模型的那一套输出给第二个采样器节点。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
最后,我们能可以输出两个图像节点,第一个链接base模型的vae,可以设置为预览图像;第二个链接一个VAE加载器的节点,加载sdxl自带的vae,设置为保存图像,也就是我们最终输出的图像。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式

使用这个工作流我们来跑一张sdxl模型的图片,设置好两个模型和提示词,点击生成。

【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
在生成过程中,显存的占用率为7-9GB。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
从后台可以看到,每一次生成的耗时在13-15s之间。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
我使用同样的参数来测试一下webUI
在生成过程中显存占用率为8-11GB。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
从后台可以看到,每一次生成的耗时在25s之间。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
可以看出,comfyui在处理sdxl的模型是,确实要比webui更有效率一些。
可能有些朋友已经被这个节点绕得有点晕了,但是还没结束。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
接下来,我们再试一试sdxl的风格控制,添加【新建节点】-【实用工具】-【SDXL Promot Styler Advanced】节点。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
我们可以看到,在这个节点上有两套正负向提示词,分别对应着base和refiner。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
点击右键,分别增加g和l作为输入点。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
这样,我们就可以通过这一个节点将文本提示词分别赋予到base和refiner上,同时也把风格的切换加进了工作流当中。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
点击这里的【style】就可以看到各种风格了,不过都是英文的。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
我这里有一份中英文对照的表,大家也可以参考一下,一共105种风格,我会把它放在网盘里。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
选一个黏土风格进行测试,尺寸设置为1280*768,用时15.11。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式
同样的参数,我在webui里跑了一下,用时3分33秒。
【ComfyUI】使用ComfyUI玩SDXL的正确打开方式

总结

通过今天的搭建,我们已经掌握了sdxl在comfyui中的工作流程,下次再要进行生图,只需要将这个工作流打开就可以直接运行了。效率高、生图快,可能这就是comfyui最大的优势点吧。
这个工作流我也会保存到网盘当中,大家想要的可以关注我的公众号【白马与少年】,发送【ComfyUI】即可获取连接。
-END-
我的最新课程《Stable Diffusion零基础入门宝典》已经上架CCtalk,正在预售中,前100名报名立减100,想了解的朋友长按下方图片识别二维码,可以进入购买链接>>>

【ComfyUI】使用ComfyUI玩SDXL的正确打开方式


往期精彩内容回顾
  • 【课程】爆肝制作!Stable Diffusion零基础入门宝典
  • 【Stable Diffusion】用AI给老照片上色,岁月不改它模样
  • 【ComfyUI】Blender+Stable Diffusion!少年啊,这盛世如你所愿!(附中文汉化插件)
  • 【ComfyUI】本地部署ComfyUI上手指南,我就喜欢连连看
  • 向未来而生,关于SDXL你要知道事儿
  • 想磕的CP随便磕,多角色Lora同时出现的方法
  • Roop换脸插件,全网最简单傻瓜式安装教程
  • 【Lora炼丹术】从零开始,炼制你的第一个LoRA(1)
  • 最强手部识别,controlnet新预处理器dw openpose
  • 超大尺寸绘制、分区控制,详解Tiled Diffusion & VAE插件功能
  • AI造字,把你的名字写在季节里
  • 隐藏在光里的秘密,AI造字光与影的艺术~
  • 隐藏定位点!融合度更高的二维码生成
  • 图片高清化+面部修复+一键抠图,一些你不知道的事儿
声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。

给TA打赏
共{{data.count}}人
人已打赏
AIGC

【Stable Diffusion】用AI给老照片上色,岁月不改它模样

2023-9-13 19:00:28

AIGC

AIGC | 中秋节视觉设计全攻略-手把手教程

2023-9-14 14:02:42

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
购物车
优惠劵
今日签到
有新私信 私信列表
搜索