Midjourney + Stable Diffusion 做场景图 (ControlNet Depth)

Midjourney V6 生成的图片细节逼真,堪比真实摄影。它可以解决绝大多数商业上的场景图需求。从此再也不必专门为了场景而去拍摄照片了。

可是,光有场景很难实现商业上的落地。如何把产品很自然地融入其中才是关键!这时候 Stable Diffusion 就派上用场了。

我将通过实际案例演示 Midjourney 如何配合 Stable Diffusion 做出一个非常有场景感的产品图片。

1. Midjourney 生成场景图

在 AI 赋能摄影的时代,我们只需要一张基本的白底产品图即可。下图是一幅薄荷精油的图片,我们将要为它塑造场景。

为了展现精油健康,有机的产品形象,我们需要为此设计相关的场景。我用下面的提示词在 Midjourney 中生成了一幅场景图。我把白底的产品图给 Midjourney 做参考,这样它生成的产品和真正的产品会更像。

Prompt: Medium: Photo. Subject: A bottle of peppermint essential oil on a moss-covered log, surrounded by peppermint leaves. Emotion: Serene. Lighting: Natural, clear blue sky. Scene: Bubbling brook in the background, lush greenery. Style: Realistic, vibrant colors

提示词:媒介:照片 主题:一瓶薄荷精油放在长满青苔的原木上,周围环绕着薄荷叶。情感:宁静。光线: 自然、晴朗的蓝天。场景: 背景中潺潺溪流,绿意盎然。风格:写实,色彩鲜艳

我们之所以还需要产品在图片里,而不是仅仅生成场景图的原因是,我们需要一个放置产品的位置。

我之前还写了一个 Midjourney 教程,介绍了各种产品摄影的提示词,感兴趣的话可以阅读一下:

👉 90+ Midjourney 产品摄影提示词

2. 让产品消失

这一步我们需要通过 AI 技术非常自然地让 Midjourney 里的产品消失,以便替换为我们真实的产品。这个工作可以通过 Photoshop 或者 Adobe Firefly 的创成式填充 (Generative Fill) 来完成。

只需要选中 Midjourney 里面的产品,然后不写任何提示词,直接点击 "生成",Adobe 就会自动利用周围的元素对选中区域进行填充,效果非常自然。

3. 把产品放到场景中

下一步就是把产品抠出来,然后摆放到场景中合适的位置。

利用新版的 Photoshop 对象选择工具可以轻松地把产品选择出来。也可以利用 Removebg 或 Clipdrop 等网页版的 AI 工具直接消除背景。

产品不用抠得非常仔细,有点瑕疵也没关系,因为接下去我们会利用 Stable Diffusion 处理。通过 Photoshop 把照片处理得非常自然是很困难的。

尽管精油有些浑浊,但放在自然环境中,还是可以透过玻璃瓶看见背后模糊的景色的。环境光也会给玻璃的表面带来不同的明暗色调。这一切通过 Photoshop 很难还原得非常真实。

这时候 Stable Diffusion 就派上用场了。

4. SD合成

在 Stable Diffusion 里面选一个模型。最好是 SDXL 的模型,这样质感更好。我这里选的是基于 SD1.5 的 realisticVision。然后填入相关的提示词。

接下去用到的是 ControlNet 里面的 Depth 模型。这一步主要是生成一个深度图,用来控制产品的轮廓,这样跑出来的产品和原先的产品轮廓一致,方便后期把有瑕疵的地方还原成原先的模样。

而且 Depth 可以给 Stable Diffusion 一些发挥空间,让产品融入效果更真实,不像 Canny 或者 Lineart 那样控制得太死。

重绘强度 (Denoising Strength) 我设置了一个相对较高的数值。这样 Stable Diffusion 发挥的空间更大,效果更自然一些。

我生成了好几张,从中挑选了一张效果比较满意的。

可以看到瓶身的部分效果很真实,可以透过玻璃看到后面的一部分景色。

瓶口的部分很不自然,不过没关系,接下去我们可以用 Photoshop 添加蒙版,还原原先产品的瓶口部分,最终效果如下图所示。

如果用 SDXL 的模型,画面的质感会更好。当然,在 Stable Diffusion 重绘过程中可能会丧失 Midjourney V6 的质感,也可以在蒙版上涂抹进行还原。

总结

AI为设计领域开启了新篇章,引领我们走向无限的可能性。在生产式AI的助力下,摄影师和后期工作者们可以从琐碎且耗时的任务中解脱出来,交由AI来完成。未来,设计师们将更加注重创意与想法,而不再需要熬夜进行机械化的重复操作。

分享完毕,感谢阅读🤗 欢迎点赞,收藏,评论

更多免费原创教程,🚀关注公众号:我的AI力量

对 AI 绘图感兴趣的,欢迎加我微信vito_chat入群交流。请备注 AI 绘图。

欢迎访问我的免费学习AI网站:

myaiforce.com.cn/

原文地址:

myaiforce.com.cn/midjourney-...

相关推荐
三声三视16 小时前
uni-app 鸿蒙端传参变成 [object Object]?顺着源码追到 ArkTS router 底层才搞明白
人工智能·ai·uni-app·aigc·ai编程·harmonyos
DisonTangor21 小时前
【微软开源】Mage-Flow 深度解读:微软4B参数图像生成与编辑模型,单卡A100仅需0.59秒
人工智能·microsoft·ai作画·开源·aigc
大模型搬砖师1 天前
金融、制造、互联网:三个行业的 AI 网关落地实录
aigc·ai编程·gpu算力
imbackneverdie1 天前
知网官宣:禁止 AI 列为论文署名作者,标注 Gemini、DeepSeek 等 AI 为作者的稿件统一下架
大数据·人工智能·ai·职场和发展·aigc·科研·高校
春风野草1 天前
AI Agent 工程底座实战:模型路由、限流、错误处理和成本意识
aigc·ai编程
程序员在囧途1 天前
AIGC SaaS 多租户平台怎么做行业客户二次演示?从 https://aigc.likeadmin.cn 到开源应用中心复盘链路
开源·aigc
后端小肥肠1 天前
Doubao-Seed-Evolving实测:我做了个情绪价值拉满的星座记账 Skill
人工智能·aigc·agent
李剑一1 天前
看完DeepSeek梁文锋内部交流会发言实录,我或许明白了为什么一直坚持不融资的DeepSeek开启了融资之路,也明白了中国人做AI一定是能够成功的
aigc·agent
狂师1 天前
从 LLM 评测到 AI Agent 评测,我的一些思考!
人工智能·程序员·aigc
win4r2 天前
🚀Graph Engineering范式:Codex Multi-agent V2支持Kimi、MiniMax、GPT多模型混用+动态派生subagent,并行执行、Pi Agent工具调用,效率倍增
aigc·ai编程·vibecoding