Flux+LoRA文生图工作流

工作流介绍

该工作流可以在Houdini中操作ComfyUI根据FLux模型配合相关LorRA进行图片生成，提供了8步加速与 图像放大功能。

用户可以在Houdini里指定要使用的LoRA，可以是场景，也可以是角色，在houdini中输入flux提示词与种子进行生图控制，并且图片生成后会自动导入到Houdini中。

节点名

DF_Flux_T2Lora

环境配置

Houdini配置

Houdini需要先先安装WebSocket Python模块，安装方法：在Houdini Python中安装WebSocket模块-数字折叠

Comfyui插件配置

1.GGUF:ComfyUI-GGUF插件下载-数字折叠
2.Easy_Use:ComfyUI-Easy-Use自定义节点集成包插件-数字折叠
3.UltimateSDUpscale:ComfyUI_UltimateSDUpscale高清放大插件-数字折叠

Comfyui模型配置

1.FLuxGGUF模型，根据自己的显卡配置选择，版本号越高对显卡要求就越高，如果显存高于12G建议使用Q8版本。Flux1 dev gguf量化模型Q4 Q5 Q8-数字折叠，安装目录根据连接里的说明放置。

2.Clip和Vae文件同样可以在上面GGFU模型下载里获取。

3.8步加速LoRA:阿里妈妈Flux 8步出图Lora flux.1 turbo alpha-数字折叠

4.高清放大模型：：4x-ClearRealityV1-4x-UltraSharp细节增强模型-数字折叠

参数说明

• 启动AI:点击后会启动ComfyUI程序，需要先配置好ComfyUI的路径
• 执行：点击后就会执行出图操作，执行完会将图片导入到hda里面的Copnetwork节点，需要打开Composite View面板查看
• 种子：不同种子会得到不同的图像
• 提示词：写出图的提示词，需要加上LoRA的触发词，细节建议用Chatgpt添加

模型配置

• 使用加速：勾选默认使用8步快速出图，如果不勾选需要将采样步数加到20以上
• Comfy路径：你的ComfyUI安装路径
• gguf模型路径：选择你的gguf flux模型，需要在ComfyUI根目录/models/unet里选择
• 加速LoRA:选择Loras目录里的8-step-flux.safetensors这个模型.
• 主控LoRA：选择你要控制的LoRA模型，比如数字折叠的角色LoRA.
• Clip1路径：选择clip_l.safetensors模型
• Clip2路径：选择t5-v1_1-xxl-encoder-Q8_0.gguf模型
• vae路径：选择ae.sft
• 服务器地址：默认填写127.0.0.1:8188

图像控制

• LoRA强度：你的主控LoRA的控制强度，数值越小风格影响就越少，但也不要最大超过1
• 采样步数：如果启用加速LoRA就默认保持10，如果没有加速LoRA,值越高细节越好，时间就越慢。
• 保存路径:图片默认保存再ComfyUI的out文件夹，除此之外，你可以通过这个选项设置另外一个保存的路径，这个路径也会控制houdini最后的图像加载。
• 图像前缀：图像的前缀名
• 分辨率：图像的宽高比，如果是单独角色图建议（768 *1344）
• 图片数量：执行一次产生的图片数量

高清放大

• 启用放大：如果勾选，图像在生成之后将会进行一次细节放大修复，建议先生成一次满意的图像，再勾选启用放大执行放大。
• 放大系数：在原始的分辨率上再进行多少倍的放大
• 放大模型 ：选择/models/upscale_models文件夹里的放大模型
• 放大种子：不同的种子得到不同的细节修复效果
• 分块宽度：每次修复的宽度
• 分开高度：每次修复的高度

使用方法

1.将hda下载下来，通过Houdini菜单上的Assets-Install Asset Library进行安装

2.配置好模型参数和ComfyUI路径就可跑图了

版权说明