AI绘画Stable Diffusion ,3种方法精确控制人物姿势,总有一种适合你!

AI绘画软件

stable diffusion 中,控制人物姿势的方法有很多,最简单的方法是在提示词中加入动作提示词,比如Sit, walk,

run(坐、走、跑)等,但如果想要精确控制人物姿势就比较难了,首先想要用语言精确描述一个姿势比较困难,另外stable

diffusion生图姿势图就像抽盲盒一样具体有一定的随机性。今天跟大家介绍几个常用的精确控制人物姿势的方法。

1、ControlNt 中的 OpenPose

ControlNt 是 stablediffusion中功能非常强大,也是非常重要的一个插件,用它的OpenPose可以很容易做到控制人物姿态。首先,我们需要准备一些人物姿势图片。这些人物姿势图可以自己拍摄,也可以从网上下载。

这里提供一个下载方法:请看文末扫描获取Openpose八百张骨骼姿势图

有了pose参考图后,我们用提示词生成一张小姐姐图片(见下图)然后以这张图片为例,将人物姿势应用到这张小姐姐图片上。

打开

ControlNet,将姿势参考图片拖入参考图片内,按下图红框内的提示,勾选启用,预处理和模型都选择OpenPose,最后注意尺寸要和原图尺寸保持一致。

生成的小姐姐图片很漂亮,姿势和参考图一致,但 stable diffusion出全身图容易出现脸部变形和坏手的情况,这是一件很让人讨厌的事情,下面我们来解决坏手这个问题。

在使用 OpenPose时会自动生成一张骨骼图,我们需要把这张骨骼图保存下来。

在深度图编辑器(这是一个插件,具体安装方法下面会介绍)中导入刚刚的骨骼图,加入两个手势,然后导出手势图。注意图片尺寸要和原图一致。

回到ControlNet中,到第二个栏位(下图红色框内),拖入刚刚的的手势图,预处理不选,模型选择dpth(深度图),注意尺寸要和原图一致。然后点击生成。

看下结果,好像解决得还是不太完美,这个过程需要大家仔细耐心的调整,我在这里就不浪费时间了。

2、用OpenPose editor(OpenPose编辑器)控制人物姿势

首先说下OpenPose editor 和上文提到的 Openpose hand(深度编辑器)的安装方法:

打开扩展,从网址安装,然后分别输入下图中的网址,点击安装即可。

当看到提示"Installed into D:\AI\stable-diffusion-webui\extensions\openpose-editor.Use Installed tab to restart."重新启动stable diffusion,OpenPose编辑器和深度编辑器就安装好了。

重启webui后,会发现菜单栏上面有多了OpenPose编辑器和深度编辑器,打开OpenPose编辑器,会发现一个骨骼小人。

这个骨骼是可以自己用鼠标手工调整的,但容易调变形,让身体产生畸形,你也可以载入一张背景图做为参照进行调整,调整好后的骨骼图导入ControlNet中即可。

人物姿势基本是按照我摆好的骨骼生成的,不过这姿势有些丑,这是我没调整好姿势的原因,另外就是生成了坏手。解决坏手可以按照上面说到的配合深度图编辑器来解决,也可以用我下面的方法来解决。

3、用 3D Openpose editor精确控制人物姿势,一并解决坏手问题

3D Openpose editor 是一个中国小哥开发的网站,连使用界面都是中文的。

3D Openpose editor允许用户自己调整人物骨骼姿势,也可以随机生成,还可以通过图片识别人物姿势,待调整好姿势后,点击生成,分别保存人物骨骼图和手部深度图,导入ControlNet 中使用即可。注意这里要事先调整好宽高比例。

两张图片放置的位置和设置见下图。

人物的姿势是按照我们设置的骨骼图生成的,人手虽然稍微好了一些,但还是有些变形,这个需要我们耐心调整手部骨骼的深度图,需要挑战大家的耐心,这里我就不浪费时间了,需要大家自己去尝试。

如果你对AIGC感兴趣,不妨了解一下我们的课程,顺便白嫖一些资料↓↓↓

相关推荐
隔着天花板看星星17 分钟前
Spark-Streaming性能调优
大数据·分布式·spark
机器视觉知识推荐、就业指导35 分钟前
深度学习OCR与传统OCR对比实验:图像数据集联系博主获取
人工智能·深度学习·ocr
新加坡内哥谈技术1 小时前
NVIDIA发布紧凑型生成式AI超级计算机:性能提升,价格更低
大数据·人工智能·语言模型·自然语言处理
WPG大大通1 小时前
基于ST STM32MP257FAK3的MP2控制器之工业PLC 方案
网络·人工智能·mcu·plc·方案·大大通
E___V___E1 小时前
opencv 项目--图像匹配
人工智能·opencv·计算机视觉
考试宝1 小时前
道路运输企业安全生产管理人员安全考核试题
网络·人工智能·笔记·安全·职场和发展·学习方法·业界资讯
埃文科技1 小时前
数据资产入表 解锁智慧城市新潜力
大数据
DashVector2 小时前
如何通过HTTP API新建Collection
数据库·人工智能·http·阿里云·向量检索
JoyCong19982 小时前
如何实现《黑神话:悟空》人物换脸?ToDesk云电脑AIGC版实操教程
aigc·电脑
Tiandaren2 小时前
从Python到C++的转变之路——如何高效复现C++开源项目 || Windows || Visual Studio || 持续更新
开发语言·c++·图像处理·人工智能·python·深度学习·开源