Flux 最新最快ControlNet模型现身:法线贴图详细测评

原文链接:Flux目前最快ControlNet模型现身!法线贴图详细测评 (chinaz.com)

Flux目前最快ControlNet模型现身!

上周一个名叫JasperAI的团队开源了他们的 3 款Flux ControlNet,分别是法线贴图,深度,和升频器,其中的升频器和法线贴图比较值得说道说道。所以这里会开两篇教程详解讲解这两个ControlNet的作用。

三款模型的下载地址:

Upscaler: https://huggingface.co/jasperai/Flux.1-dev-Controlnet-Upscaler...

Normals: https://huggingface.co/jasperai/Flux.1-dev-Controlnet-Surface-Normals...

Depth: https://huggingface.co/jasperai/Flux.1-dev-Controlnet-Depth...

本篇先介绍一下这个法线贴图

法线体贴是什么

法线贴图是一种凹凸贴图,会生成特殊的纹理,把表面细节通过光线表现出来,所以使用Normal_bae预处理器也有 3 个好处:

1、Normal_bae可以更好的还原原图的光影;

2、Normal_bae可以不保留太多原图细节,让新生成的图不至于和原图一模一样;

3、Normal_bae可以保留更多光影信息,让图片看着更有细节。

模型下载

下载完我们重命名Flux_ControlNet_Normals,然后放入下图的文件内

节点搭建

前提是你使用的是comfyui出品的flux_fp8 模型,就可以很方便的搭建一个ControlNet的模块:

关于性能

目前Flux的ControlNet多多少少会影响出图的质量,即使是这个也不例外,但是为什么说它性能优秀,因为这个CN出图速度非常快,测试了很多次 4090 大概在13s左右,相比起其他的ControlNet速度快了不少。

显存的占用情况也不是特别高,大概在20G左右,不过还是已经劝退低显存的小伙伴了

关于预处理器

Aux集成预处理器节点有四款支持法线贴图的预处理器,每个预处理器生成的效果有不太一样,这边简单做了个对照,方便小伙伴们选择适合的预处理器。

DSINE预处理器:虽然这个预处理器的法线贴图看起来最精致,但是出图效果几乎都是卡通形象,可以做虚实结合的效果。

BAE预处理器:这是我首推的预处理器,虽然法线贴图不够精致,但是出图效果比较好

MiDaS预处理器:法线贴图比较特殊,出图效果不稳定,姿势不会完全和预处理器的姿势一样。

Metric3D预处理器:这个效果和BAE效果类似,也是不错的选择。

关于权重

关于权重:建议是0.5-0. 6 这个范围会比较好,0. 5 以下就有点控不住了,0. 6 以上控性效果太强出坏图。

总结

其实没必要为了速度和放弃出图质量,因为使用FLux就是图它出图的效果更好,如果又想控制人物形状又想有比较好的出图质量还不如使用SDXL。

相关推荐
♡すぎ♡5 天前
ShaderLab:可互动水面(基于RenderTexture,实时生成动态扰动)
计算机图形学·贴图·opengl·着色器
魔士于安8 天前
Unity完整小球迷宫项目
前端·unity·游戏引擎·贴图·模型
魔士于安8 天前
Unity 超市总动员 超市收银台 超市货架 超市购物手推车 超市常见商品
游戏·unity·游戏引擎·贴图·模型
魔士于安10 天前
Unity windows 同步 异步 打开文件文件夹工具
游戏·unity·游戏引擎·贴图·模型
魔士于安10 天前
unity lowpoly 风格 城市 建筑 道路 交通标志
游戏·unity·游戏引擎·贴图·模型
魔士于安10 天前
Unity UI图片 复活节UI,卡通风格
游戏·ui·unity·游戏引擎·材质·贴图
魔士于安10 天前
unity 卡通风整套资源 小鸟N套带动作+一套卡通风村落 和 相关道具+落叶粒子效果 buildin
游戏·unity·游戏引擎·贴图·模型
CG_MAGIC10 天前
幕后花絮:用Blender打造自己的建筑
3d·blender·贴图·uv·建模教程·渲云渲染
魔士于安12 天前
Unity类似博物馆场景
前端·unity·游戏引擎·贴图·模型
摄影图15 天前
智慧城市数字孪生素材 多元风格适配各类创作需求
信息可视化·aigc·智慧城市·贴图·插画