ComfyUI入门:文生图text2img
1.从sd-webui中理解文生图的工作流程————厨师理论
- 食材:正向提示词、反向提示词、checkpoint模型、lora模型等;
- 厨师:采样器;
- 锅:图片的宽度和高度,即“画布”的大小;
- 烹饪手法:采样器参数,包括迭代步数(steps)、提示词系数(cfg)、种子(seed)等;
- 勾芡:VAE模型;
- 菜品:生成的图片。
2.基础工作流
按照厨师理论,工作流就是烹饪菜品的整个流程。
第一步:安排厨师。
在ComfyUI界面中加入K采样器,可以看到其中已经包含了采样器的各个参数,厨师和他的烹饪手法就设置好了。
第二步:准备食材
从K采样器的左侧节点拉线:
- 模型————checkpoint加载器(用于加载底模)
- 正向提示词/反向提示词————Clip文本编辑器(用于输入提示词)
- Latent————Empty Latent Image(用于设置图片大小)
第三步:准备勾芡
从K采样器右侧节点“Latent”拉线,创建VAE编码器,用于编码VAE。
第四步:菜肴出锅
从VAE编码器右侧节点“图像”拉线,创建图像预览器。
第五步:补齐流程
这时运行工作流,发现报错,系统标识出没有连接的节点,我们需要把这些节点补齐。
- checkpoint加载器和Clip文本编辑器的Clip节点应当连接;
- VAE编码器的VAE模型应当加载。这个模型可以来自你的底模,这时应当连接checkpoint加载器上的VAE节点和VAE编码器的VAE节点;同样地,如果底模不包含VAE,则应当另外加载VAE模型,从VAE编码器的VAE节点拉线,创建VAE加载器。
如图,最基本的文生图工作流就已经完成了。(包含两种VAE加载方式)