您学习 ComfyUI 和 Flux 一段时间后准备学习 Python 开发 ComfyUI 节点并对接模型,这个方向是可行的。以下是一些相关的知识和要点供您参考:
[heading2]总结工作流整理及相关问题解答工作流节点的拖动操作:可直接拖动单个节点到任意位置,也可按住Control键并用鼠标左键滑框选中多个节点,再按Shift键一起拖动。工作流节点的组合与编辑:选中节点后右键新建组,可修改组名、颜色等,组被覆盖时可直接拖动组。工作流节点的对齐操作:选中节点后右键选择对齐方式,如顶部对齐、左边对齐等。第三方节点的安装方式:包括在customer NODE manager中安装、在GitHub上复制链接安装、通过终端输入指令安装、在秋叶启动器的版本管理中安装。特定节点的相关问题:如狐狸头代表config原生节点,Max live是一套功能强大的节点,GPU进度条对应的节点老师忘记了等。关于图像生成模型相关问题的讨论噪声控制与种子的关系:噪声强度由种子调节,种子固定噪声分布方式,噪声与CLIP无关,增大噪声设置值会增强模型对图片重绘的程度。分组执行的控制方法:可通过group by Parser节点控制组,也可通过按住节点按control b跳过或按control m终止执行。模型版本的提示词差异:1.5以tag为主,XL论文称以自然语言为主,但实际使用中因模型微调情况可能仍需用tag。Flux模型生成黑图的问题:有时生成黑图,可能有修复方案,需自行查询。图像生成流程错误排查:图像生成结果为空,可能是VAE编码器与大模型未连接,调整连接后问题解决。
D:\ComfyUI\ComfyUI_windows_portable\ComfyUI\custom_nodes[heading1]四、安装步骤[content]1、(Comfyui evn python.exe)python -m pip install -rrequirements.txt或点击install_req.bat注意:transformers版本不能太低(注:transformers版本不能太低)2、下载模型或者运行comfyui自动下载模型到合适文件夹(Download the model or run Comfyui to automatically download the model to the appropriate folder)下载模型或者运行comfyui自动下载模型到合适的文件夹(下载模型或者运行Comfyui自动下载模型到合适的文件夹)3、模型安装(Install model)1).Joy_caption.运行自动下载模型(推荐手动下载)Run automatic download model(manual download recommended)从https://huggingface.co/unsloth/Meta-Llama-3.1-8B-bnb-4bit下载并放到Models/LLM/Meta-Llama-3.1-8B-bnb-4bit文件夹内网盘链接:3.必须手动下载:https://huggingface.co/spaces/fancyfeast/joy-caption-pre-alpha/tree/main/wpkklhc6存放文件夹:models/Joy_caption网盘链接:2).MiniCPMv2_6-提示生成器+CogFlorence[https://huggingface.co/pzc163/MiniCPMv2_6-prompt-generator](https://huggingface.co/pzc163/MiniCPMv2_6-prompt-generator)[https://huggingface.co/thwri/CogFlorence-2.2-Large](https://huggingface.co/thwri/CogFlorence-2.2-Large)运行:flux1-dev-Q8_0.gguf报错解决办法:
新版的PuLID解决了模型污染的问题,所以建议用新版的。使用新版的[ComfyUI_PuLID_Flux_ll](https://github.com/lldacing/ComfyUI_PuLID_Flux_ll)节点需要禁用或者删除之前的PuLID节点,不然可能会有冲突问题。模型放在ComfyUI\models\pulid文件夹里面,模型注意用新版的。如果你是使用PuLID,还需要安装下面的模型。EVA CLIP是EVA02-CLIP-L-14-336,应该会自动下载(将位于huggingface目录中)。如果由于某些原因自动下载失败(并且你遇到face_analysis.py,init assert'detection'in self.models异常),请手动下载此EVA-CLIP模型,将文件放入你的ComfyUI/models/clip目录并重启ComfyUI。下载地址:https://huggingface.co/QuanSun/EVA-CLIP/blob/main/EVA02_CLIP_L_336_psz14_s6B.pt?download=truefacexlib依赖需要安装,模型将在首次使用时下载。最后你需要带有AntelopeV2的InsightFace,解压后的模型应放置在ComfyUI/models/insightface/models/antelopev2中。https://huggingface.co/MonsterMMORPG/tools/tree/main如果你是用的旧版的flux的PuLID节点,可能会遇到一些问题,下面是解决的办法: