Flux CN：XLabs发布可控组件V3，可控性里程碑

Flux ControlNet模型简介

在之前的文章中已经介绍过由XLabs-AI团队开发的最新Flux模型的最新的3款ControlNet模型（Canny硬边缘、深度Midas、线条HED），但是整体初步体验下来，整体质量还未达到可完美使用效果。但XLabs-AI团队在继续的推进和训练FLux ControlNet模型的进展，随着不久时间就由发布了这三款的ControlNet模型的V2、V3版本。今天的文章将一起体验和评测它的最新V3版本 模型。笔者将长期跟踪和关注Flux模型生态的LORA、ControlNet，这也是Flux模型构建繁荣生态，以及取代SD1.5，SDXL的最后一公里的里程碑事件。

• 官方ControlNet地址：https://huggingface.co/XLabs-AI/
• LibLib ControlNet地址：
- XLabs-flux-depth-controlnet：https://www.liblib.art/modelinfo/b1bbdb2421fd4ae6b29cc95fd5583e1c
- XLabs-flux-depth-controlnet：https://www.liblib.art/modelinfo/cb8af148f70b4923873dc8fd68e37cfb
- XLabs-flux-Canny-controlnet：https://www.liblib.art/modelinfo/13db01e88127402682b80bc84ab6df9d
• 官方LORA地址：https://huggingface.co/XLabs-AI/flux-lora-collection/tree/main
• LibLib LORA地址：https://www.liblib.art/modelinfo/515bf1ac6e544ec2a1cecdd9a28b5eb3

另外，本次使用ControlNet，从V2版本开始，官方训练和推荐分辨率变为1024*1024。这与之前的是有区别的（v1版本中，深度：1024x1024分辨率；线稿Canny，HED使用 768x768 分辨率）。

XLabs-AI Flux ControlNet演示

XLabs-AI在其主页提供了这3类flux ControlNet的演示示例如下所示：

Canny

深度 (Midas)

HED

更多Flux模型系列介绍参考文章：

Flux ControlNet模型体验

当前最新版本的ComfyUI已支持Flux ControlNet模型的体验，同时还需要通过插件管理器Git安装x-flux-comfyui该插件。其中需要将模型放置到 ComfyUI/models/xlabs/controlnets目录下，如本地不存在该目录可以手工新建可以，也可以首次运行自动创建目录。更多安装详情参见文章：[ComfyUI]Flux：新添深度和线条3款CN成员，工业级可控性即将到来，继LORA后的生态最后一公里。

本文使用的是XLabs-AI/x-flux-comfyui 插件，具体安装方法请参考之前文章：[ComfyUI]Flux：新添深度和线条3款CN成员，工业级可控性即将到来，继LORA后的生态最后一公里。插件地址：https://github.com/XLabs-AI/x-flux-comfyui 。

另外这个版本出图耗显存较大，24G显存机器大约每张图25步迭代需要耗时1分钟。

• 插件地址：https://github.com/XLabs-AI/x-flux-comfyui.git
• LORA模型地址：https://huggingface.co/XLabs-AI/flux-lora-collection/tree/main
• ControlNet模型地址：https://huggingface.co/XLabs-AI/ 。也能文章开始罗列LIBLIB平台地址下载。
• Flux Dev新V3 CN组件工作流：https://www.liblib.art/modelinfo/327e229aca1e40419945f9ace4c6d08a

工作流界面

关于本地ComfyUI工作流体验参见之前文章：FLUX[续篇]：12B参数23G最大开源文生图模型，Dev版直出惊艳美图欣赏. 本文涉及ComfyUI工作流和模型均可在LIBLIBAI上下载或在线运行体验： • FLUX.1哩布在线可运行-黑暗森林工作室： https://www.liblib.art/modelinfo/488cd9d58cd4421b9e8000373d7da123 • Flux LORA ComfyUI整合包： https://www.liblib.art/modelinfo/515bf1ac6e544ec2a1cecdd9a28b5eb3 • Flux模型文|图生图+LORA+提示反推一键切换工作流： https://www.liblib.art/modelinfo/782aacd70f604da39e83368c696a02a8 • Flux Dev新V3 CN组件工作流： https://www.liblib.art/modelinfo/327e229aca1e40419945f9ace4c6d08a

LIBLIBAI平台已支持Flux模型在线运行体验，并且笔者已增加换脸节点 使用。工作流地址为：

https://www.liblib.art/modelinfo/782aacd70f604da39e83368c696a02a8。

一：硬边缘（Canny）

以下均使用CN权重幅度为0.7体验测试。

01. 室内设计

Chinese style, cyberpank dining room, full hd, cinematic,sunshinex输出效果

02. 偷鸡娃

Capture an energetic scene of a chubby little boy in rural China, shirtless, chubby belly, still clinging to dirt, wearing a pair of muddy white cloth shoes on his feet, and a mischievous and happy expression on his face, running through the muddy streets of the countryside. The dust was flying, and the little boy was clutching on his arm a large, strong rooster, whose feathers were a mixture of deep Burgundy and glittering gold, in stark contrast to the boy's plain clothes. The rooster frowns slightly, but is surprisingly calm, adding a whimsical twist to the energetic chase. The background is a rural wet market. The overall tone of the film is a lively and lively atmosphere, which summarizes the free and simple youth. The sun shines through the white clouds, casting dappled shadows, and the pleasant warm picture enhances the sense of movement and the joyous chaos of the moment.

输出效果

二：深度（Midas）

01. 室内设计

Chinese style, cyberpank dining room, full hd, cinematic,sunshine

输出效果

02. 偷鸡娃

Capture an energetic scene of a chubby little boy in rural China, shirtless, chubby belly, still clinging to dirt, wearing a pair of muddy white cloth shoes on his feet, and a mischievous and happy expression on his face, running through the muddy streets of the countryside. The dust was flying, and the little boy was clutching on his arm a large, strong rooster, whose feathers were a mixture of deep Burgundy and glittering gold, in stark contrast to the boy's plain clothes. The rooster frowns slightly, but is surprisingly calm, adding a whimsical twist to the energetic chase. The background is a rural wet market. The overall tone of the film is a lively and lively atmosphere, which summarizes the free and simple youth. The sun shines through the white clouds, casting dappled shadows, and the pleasant warm picture enhances the sense of movement and the joyous chaos of the moment.

输出效果

三：线条（HED）

01. 室内设计

Chinese style, cyberpank dining room, full hd, cinematic,sunshine

输出效果

02. 偷鸡娃

Capture an energetic scene of a chubby little boy in rural China, shirtless, chubby belly, still clinging to dirt, wearing a pair of muddy white cloth shoes on his feet, and a mischievous and happy expression on his face, running through the muddy streets of the countryside. The dust was flying, and the little boy was clutching on his arm a large, strong rooster, whose feathers were a mixture of deep Burgundy and glittering gold, in stark contrast to the boy's plain clothes. The rooster frowns slightly, but is surprisingly calm, adding a whimsical twist to the energetic chase. The background is a rural wet market. The overall tone of the film is a lively and lively atmosphere, which summarizes the free and simple youth. The sun shines through the white clouds, casting dappled shadows, and the pleasant warm picture enhances the sense of movement and the joyous chaos of the moment.

输出效果

四：线稿上色（Canny）

01. 背影杀手

1girl, chinese girl, 20-old-years, simple background,Turn your back on the audience, half backless,shadow killer, light red|yellow dress, transparent silk dress, white backgroound

输出效果

最后，整个V3版本ControlNet模型体验结果，相比之前的V1、V2版本已经取到了巨大的进度，更加完善，已逐步可用于出图实践中。对于大部分线稿图质量整体已能直出不错质量，在测试中仅对中国龙神态类型质量不太好，笔者猜测可能是因为训练数据问题。具体待读者测试和评价。需要说明，官方插件结合ControlNet模型运行特别耗费显存资源，这也是Flux Dev一直以来的问题。

• [ComfyUI]Flux：秀色可餐精品美食，谁愿来品尝？迄今最大开源万能模型

•Flux：直出UX设计稿图，LLM稿图生成前端应用代码，前端研发危机四伏？

•[ComfyUI]Flux新纪元：Flux可控性新起点，第一个CN Canny硬边缘组件发布

•[ComfyUI]Flux新纪元：Flux第一个写实LORA和CN模型诞生，Flux生态新纪元

•Flux：SimpleSDXL提前预览，惊艳画质&完美手指&精准提示遵循

•Flux：穿越千年领略中国古代诗情画意，无限制分辨率直出书山画卷震撼视觉，美不胜收

•AdvancedLivePortrait：LivePortrait提升版，ComfyUI实现视频中添加面部表情

•FLUX Pro：Flux最强闭源模型,无需4090在线即可享受超强美学艺术创作,任意无限比例直出

•FLUX[续篇]：12B参数23G最大开源文生图模型，Dev版直出惊艳美图欣赏

•FLUX12B震撼发布：SD创始团队黑马出手，直出完美手指，23G迄今最大开源文生图模型

•可图Kolors生态繁荣里程碑：专属ControlNet与Inpainting模型新成员，可控性灵魂组件