摘要 :
ComfyUI 中基于风格一致姿势参考图的工作流主要借助 ControlNet 等工具来实现,以下是其简介:
所需插件与模型
FLux 模型:用于文生图的基础工作流,为生成图像提供基……
ComfyUI 中基于风格一致姿势参考图的工作流主要借助 ControlNet 等工具来实现,以下是其简介:
- FLux 模型:用于文生图的基础工作流,为生成图像提供基本的模型支持。
- PuLID 脸部插件:帮助参考脸部特征,使生成图像中的人物脸部与给定的参考图保持一致。
- InstantX Controlnet 控制模型:在姿势参考方面发挥关键作用,能依据输入的姿势参考图来控制生成图像中人物的姿势。
- 参数设置:
- 脸部参考图片:上传想要参考的人脸照片,以此确定生成图像中人物的脸部特征。
- 姿势图:选择一张姿势参考图,若更换需自行调整后续裁剪区域参数。
- 提示词区域:描述生成图像的风格等特征,如 “3D 皮克斯风格”,可根据需求修改。
- 生成初稿:
- 利用FLux 大模型文生图基础工作流提供基本的图像生成能力。
- 通过PuLID Flux 脸部参考确保生成图像的脸部特征与参考照片一致。
- 借助InstantX Controlnet 的姿势参考,依据姿势参考图来控制生成图像中人物的姿势,从而生成具有指定脸部特征和姿势的初稿图。
- 高清放大与脸部修复:使用 SD 放大功能将初稿图放大,例如放大 2 倍,然后利用面部细节节点对脸部进行进一步细化,修复可能存在的问题。
- 裁剪图片:根据需要算好不同区域的宽高和偏移,使用图像裁剪节点得出各个部位的图,以便进行更精细的调整或后续处理。
- 表情迁移(可选):如果有表情迁移的需求,可以利用 AdvancedLivePortrait 插件,根据一张表情参考图调整生成图像中人物的表情。
- 生成带背景的图像:可以根据具体需求,通过相应的节点和操作,为生成的人物图像添加合适的背景,使图像更加完整和丰富。
- ControlNet:在保持原有生成风格的基础上,精准控制姿势,通过导入姿势参考图,让 AI 生成的人物完美契合指定姿势。
- IP – Adapter:可识别脸部特征,与 ControlNet 结合使用,实现面部特征的精确控制和风格迁移,帮助在不同风格参考下保持人物脸部特征的一致性。
还没有评论呢,快来抢沙发~