[ComfyUI]FluxCN:精确控制!F1可控性组件最全剖析,线稿上色和转绘实战,黑森林官方下场亲手打造F1生态

科技   2024-11-24 18:07   浙江  

FluxCN:黑森林官方可控性CN组件,线稿和深度剖析

🌹大家好!欢迎来到破狼公众号。感谢大家的支持与鼓励。在AIGC探索道路上,我将与你一路同行。喜欢就星标关注破狼公众号或文末扫码加入交流群 !本人仅运营公众号平台,未经授权严禁CSDN等其他平台抄袭和转载!

Flux 线稿和深度组件简介

在之前文章(FLUX.1-Tools:黑森林官方重磅出手构建F1完善生态,补齐CN&IPA!加速生态里程碑进程)中已经总览介绍了最新黑森林官方团队下场亲手打造的Flux生态工具:Flux1-Tools。本文将是关于其中可控性 ControlNet组件-线稿和深度模型续篇,这是一套实现图像生成可控性精确控制的ControlNet组件,分别包含线稿和深度两类控制方式。在线稿上色、图像转绘等场景使用频繁的ControlNet组件之一。能够在图像转换过程中保持精确控制。并通过保留原始图像的结构,用户可以在保持核心构图的同时进行文本提示引导实现图像编辑。在官方的性能评估测试展现:

演示案例

Flux 线稿和深度组件 ComfyUI体验

在最新的ComfyUI官方已经本体支持了,需要更新ComfyUI软件到最新版本即可开始体验。另外还需下载下载对应模型模型也可以文末网盘获取)。

Flux CN组件全融合模型方式

需要下载 flux1-canny-dev.safetensors 和 flux1-depth-dev.safetensors两个模型并放置ComfyUI/models/unet/ 目录

  • • flux1-canny-dev.safetensors:下载地址:https://huggingface.co/black-forest-labs/FLUX.1-Canny-dev
  • • flux1-depth-dev.safetensors:下载地址:https://huggingface.co/black-forest-labs/FLUX.1-Depth-dev

Flux CN组件LORA方式

需要下载 flux1-canny-dev-lora.safetensors 和 flux1-depth-dev-lora.safetensors两个模型并放置ComfyUI/models/loras/ 目录

  • • flux1-canny-dev-lora.safetensors:下载地址:https://huggingface.co/black-forest-labs/FLUX.1-Canny-dev-lora
  • • flux1-depth-dev-lora.safetensors:下载地址:https://huggingface.co/black-forest-labs/FLUX.1-Depth-dev-lora

Flux CN工作流

Flux CN工作流已上传LIBLIB平台

https://www.liblib.art/modelinfo/f86e5107c27041b7a111eed53dbf5f13?versionUuid=dc705df276bd4c0aa3a555866ff88d19

注意

Flux文生图工作流

Flux文生图感兴趣的同学可参考LIBLIB在线运行工作流:FLUX[续篇]:12B参数23G最大开源文生图模型,Dev版直出惊艳美图欣赏。本文涉及ComfyUI工作流和模型均可在LIBLIBAI上下载或在线运行体验:

• F.1-绮梦流光-水湄凝香

https://www.liblib.art/modelinfo/134c6dd95aef48e98a22b24e003e026b

• 工作流-Flux文|图生图+LORA+提示反推一键切换工作流

https://www.liblib.art/modelinfo/782aacd70f604da39e83368c696a02a8

另外LIBLIBAI已支持本地客户端使用可首页(https://www.liblib.art)下载体验。

01. 线稿LORA-人物转换

LORA模型能够较为精准度控制,并且对输入图像无明显全局影响。总体的质量完美之前xlabs、instantX的线稿模型。详情参加:[ComfyUI]抢先体验Flux多合一CN组件,SD时代即将过去?可控性最后一公里[ComfyUI]Flux CN:XLabs官方发布CN组件V3,可控性效果显著提升,农村童年纯真回忆

cute anime girl , blonde long hair blue eyes wearing a pink sweater

02.线稿LORA-80年代建筑

LORA模型能够较为精准度控制,并且对输入图像无明显全局影响。但对于线条较多的场景(如:建筑)有少量线条丢失显存。总体的质量完美之前xlabsShakker的线稿模型。

Oriental architectural design,townhouses,80's houses,lawns,green trees

03.深度LORA-猫咪

Animation style, A cat with sunglasses and a red tracksuit


04.线稿Canny模型-80年代建筑

Canny融合模型控制精准度明显比LORA方法更精确线条。更适合于质量要求高工程类出图。

Oriental architectural design,townhouses,80's houses,lawns,green trees

05.Depth模型-人物

这里使用了亚洲人物摄影LORA模型。

Asian pregnant woman, showing off the huge belly of pregnant triplets about to give birth, long blonde hair, blue eyes, wearing a red deep V dress

06.Canny模型-线稿上色

线稿控制比较精确,实现基础线稿上色Flux不再试难题。另外还可以结合重绘和扩图工具扩图扩展图像,如文章开始图像就是使用扩图模型扩展生成。详情参加:[ComfyUI]FluxFill:先进与高效重绘和扩图神器,超越阿里等同类模型,黑森林官方下场亲手打造F1生态

Big eyes, (dark red dress: 1.3), blue eyes, purple hair, red lipstick, clean face, pink theme, soft sunlight, open eyes, 1 girl, realistic, best quality, HD,

网盘模型获取:关注公众号口令【FluxTools】获取。

更多推荐文章:

• [ComfyUI]FluxFill:先进与高效重绘和扩图神器,超越阿里等同类模型
• [ComfyUI]FluxRedux:超好玩创意灵感,一丝小遗憾!F1风格化溶图组件
• 智谱CogVideoX1.5:重大升级,可商用开源模型!10秒&增强质量&任意分辨率
• [ComfyUI]Flux:Lovely网红写真,极致细节写实,小红书网红人物写真风格
• 太酷啦!实时人物表情编辑神器,ComfyUI玩转视频表情无限创意
• PixelWave:更真实细节|动漫|摄影多种艺术风格显著提升,基于黑森林F.1D超5周精调模型
• OmniGen:统一图像生成和多任务集成模型,任意人物自由合影,8位量化体验
 15秒F.1D直出,极限无损加速方案,环境大升级敢不敢来试?
 CogVideo:重磅升级!图生视频完美镜头控制和3D环绕,商用级开源AI视频曙光
• [ComfyUI]InstantIR:来自小红书团队模糊图像修复技术,效果是否惊艳?

感兴趣加入[AGI技术交流群]+V

    如果觉得文章不错,就请在看转发三连

破狼
关注AIGC、LLM、绘图作品、软件工程、技术学习。交流+V:shunshizhiwu。
 最新文章