Flux + LoRA depth生图工作流

工作流介绍

节点名

df_flux_i2lora

作用

该工作流可以根据输入的Depth图像与Lora生成指定风格或者角色的图像。使用的是FLux GGUF深度集成模型，提供加速LoRA与图像放大。适合在三维场景生图之后对AI指定FLoRA进行深度图加工。

需要配合深度场景出图插件使用： Houdini深度图渲染输出工具DF_DepthMap-数字折叠

环境配置

Houdini配置

Houdini需要先先安装WebSocket Python模块，安装方法：在Houdini Python中安装WebSocket模块-数字折叠

ComfyUI插件

• GGUF:ComfyUI-GGUF插件下载-数字折叠
• Inspire Pack:ComfyUI-Inspire-Pack 扩展节点插件-数字折叠
• UltimateSDUpscale:ComfyUI_UltimateSDUpscale高清放大插件-数字折叠
• Easy_Use:ComfyUI-Easy-Use自定义节点集成包插件-数字折叠
• Crystools:ComfyUI Crystools 可视化实时显示硬件性能-数字折叠

ComfyUI模型配置

• Flux depth模型：Flux1.0原生depth深度图控制模型fp8和gguf版本-数字折叠下载gguf版本的模型。
• 8步加速LoRA:阿里妈妈Flux 8步出图Lora flux.1 turbo alpha-数字折叠
• 高清放大模型：：4x-ClearRealityV1-4x-UltraSharp细节增强模型-数字折叠

参数说明

• 启动AI:点击后会启动ComfyUI程序，需要先配置好ComfyUI的路径
• 执行：点击后就会执行出图操作，执行完会将图片导入到hda里面的Copnetwork节点，需要打开Composite View面板查看
• 种子：不同种子会得到不同的图像
• 提示词：写出图的提示词，需要加上LoRA的触发词，细节建议用Chatgpt添加

模型配置

• 使用加速：勾选默认使用8步快速出图，如果不勾选需要将采样步数加到20以上
• Comfy路径：你的ComfyUI安装路径
• gguf模型路径：选择你的gguf flux模型，需要在ComfyUI根目录/models/unet里选择
• 加速LoRA:选择Loras目录里的8-step-flux.safetensors这个模型.
• 主控LoRA：选择你要控制的LoRA模型，比如数字折叠的角色LoRA.
• Clip1路径：选择clip_l.safetensors模型
• Clip2路径：选择t5xxl_fp8_e4m3fn.safetensors模型
• vae路径：选择ae.sft
• 服务器地址：默认填写127.0.0.1:8188

图像控制

• 深度图路径：填写深度图路径，（不加文件名），该文件夹建议只放一张深度图。
• LoRA强度：主控LoRA的控制强度，值越大控制越明显，建议不超过1.
• 引导强度：控制depth图像的引导强度，建议填写20-35之间。
• 采样步数：如果启用加速LoRA就默认保持10，如果没有加速LoRA,值越高细节越好，时间就越慢。
• 保存路径：出图完成之后除了out文件外另外一个保存的路径。
• 图像前缀：生成图片保存时文件名前缀，
• 图片数量：一次生成多少张图像。

高清放大

• 启用放大：如果勾选，图像在生成之后将会进行一次细节放大修复，建议先生成一次满意的图像，再勾选启用放大执行放大。
• 放大系数：在原始的分辨率上再进行多少倍的放大
• 放大模型 ：选择/models/upscale_models文件夹里的放大模型
• 放大种子：不同的种子得到不同的细节修复效果
• 分块宽度：每次修复的宽度
• 分开高度：每次修复的高度

使用方法

1.将hda下载下来，通过Houdini菜单上的Assets-Install Asset Library进行安装

2.配置好模型参数和ComfyUI路径就可跑图了

版权说明