[ComfyUI]SDXL产品材质迁移工作流分享

一、介绍

大家好啊,今天我们来分享一个产品替换材质的工作流,很简单但是很实用,核心利用IPAdapter+Controlent来实现。

来看几组案例效果吧

二、工作流拆解

完整工作流

工作流说明:

  • 扣出需要替换材质的主体
  • 遮罩处理,局部裁剪
  • IPAdapter接入风格参考
  • Controlent控制构图
  • 采样出图再贴回原图

核心就是利用IPAdapter结合Controlent来实现这个材质替换功能的。

用户手操说明:

  • 上传产品图
  • 上传材质参考图
  • 输入要替换材质的主体
  • 点击执行即可

现在来分布拆解一下

2.1 输入参数

分别上传参考图和产品图

在左边这个翻译节点例如输入你要处理的主体,这里我们输入沙发

2.2 提取主体遮罩+局部裁剪

该模块利用了SegmentAnything的能力,把我们刚才的沙发遮罩抠出来,然后接入局部重绘(裁剪)这个好用的插件,把遮罩区域裁剪出来放大到1024,这样方便后续处理。

2.3 文本处理+IPadapter

这里我们用的是SDXL的一个模型,然后后面接入IPadapter,圈中类型选择 strong style transfer这种风格类型,强度0.7-1之间都行。想要更像参考图就把权重提高。

2.4 Controlent控制构图

这里我们用了2个Controlent串联起来,分别是深度和线条,圈中不需要太高,根据实际情况调整,甚至可以隐藏其中的一组都行。

2.5 采样出图再贴回原图

最后就是采样出图了,出的图是椅子局部的,我们还要再使用 局部重绘(接缝)节点贴回到原图,这样才是最终的样子。

三、云端镜像

大家如果没有本地 ComfyUI 环境,或者本地显卡配置低于 16G 的,可以使用嘟嘟部署的仙宫云镜像,可直接加载使用。后续分享的工作流都会更像到镜像中,一周更新一次,方便大学学习。

目前整合了2个镜像,一个是Flux绘图用的,另外一个是针对视频模型的,之所以分开是一些模型兼容问题,分开比较好处理。

今天这个数字人案例已经弄到镜像上了,欢迎体验。

镜像名称:嘟嘟AI绘画趣味学


云平台镜像地址:

https://www.xiangongyun.com/image/detail/d961a7dc-ade3-4bd5-a7c6-92ac49ff5e4b?r=37BCLY

https://www.xiangongyun.com/image/detail/81716d29-4461-4b0b-ba4b-7b9b7dd569d3?r=37BCLY

新用户通过邀请码注册,总共可获得 8 元奖励,体验 4 个小时的 4090 作图时长

四、总结

这就是今天分享的产品材质迁移工作流,效果不错,大家可以用起来。

技术的迭代是飞快的,要关注最新的消息才不会掉队。

关注我,每天分享最新的ComfyUI技术前沿。

今天介绍的基础工作流和模型我都打包好了。

网盘链接:https://pan.quark.cn/s/dc2646a131a5

相关推荐
墨风如雪42 分钟前
告别“面目全非”!腾讯混元3D变身“建模艺术家”,建模效率直接起飞!
aigc
iThinkAi智能体5 小时前
最新Coze(扣子)智能体工作流:1分钟生成10W+爆款橘猫生活日常视频,零剪辑基础
aigc
一tiao咸鱼5 小时前
如何简单使用 prompt
前端·aigc
kebijuelun6 小时前
百度文心 4.5 大模型详解:ERNIE 4.5 Technical Report
人工智能·深度学习·百度·语言模型·自然语言处理·aigc
不大姐姐AI智能体7 小时前
Coze智能体工作流:1分钟生成10w+爆款今日语录视频,全自动,无需剪辑
aigc
用户30742971671588 小时前
LLM-as-a-Judge :构建可扩展的自动化 AI 评估体系
llm·aigc
redreamSo12 小时前
AI Daily | AI日报:DeepMind:AI设计药物开启人体试验; Cluely创始人:先传播,AI产品开发新思路; 博主檄文怒批英伟达显卡及销售问题
程序员·aigc·资讯
张晓~1833994812112 小时前
数字人源码部署流程分享--- PC+小程序融合方案
javascript·小程序·矩阵·aigc·文心一言·html5
轻语呢喃12 小时前
React智能前端:从零开始的识图学单词项目(一)
javascript·react.js·aigc
PetterHillWater14 小时前
基于Trae智能复杂项目重构实践
后端·aigc