用AI绘画-Stable Diffusion稳定生成指定人物的2-3人场景图,制作小说配图从未如此轻松!

大家好,我是设计师阿威

最近,尝试在写故事,然后用sd配图。其中,单人场景很容易生成。

但是多人场景的话,很难稳定生成满意的图像。

今天就教大家一招,用additional networks + controlnet openpose,可以稳定生成2-3人的场景,也分享给大家。

下面以一个双人场景为例

1.安装插件和模型

(1)下载安装好sd插件,additional network。地址:https://github.com/kohya-ss/sd-webui-additional-networks。

(注意:如无法下载,请扫描获取插件安装包哦)

(2)下载安装好sd插件,controlnet 和 Openpose引导模型。

(注意:如无法下载,请扫描获取插件安装包哦)

2.找到你想生成的双人场景真人图,方便 openpose识别人体姿态,比如下面这张图。

3.设置openpose

点击enable启用,pixel pefect,allow preview;

预处理器选择openpose,模型选择openpose,(如果模型这里没有openpose,则记得下载openpose引导模型并放在SD的extensions\sd-webui-controlnet\models文件夹里面后,点击模型右侧的刷新按钮)

Control weight 权重这里设置0.8,让ai控制的姿势更自然一些。

点击预处理器右侧的爆炸图标,就能看到骨架预览图,如果识别出来的骨架图觉得不太满意,需要微调也可以用openpose editor工具对骨架识别并微调动作之后,再放进来controlnet使用。

4.设置additional networks

(1)把你想使用的lora模型,放入SD的extensions\sd-webui-additional-networks\models\lora里面。

(2)启用附加网络,并在下方选择你想要用的lora模型,并分别设置权重为0.8.

(3)接下来就是重点了,展开额外参数extra args

上传一张用ps或者之类的工具制作的人物色块png图片。(除了色块之外,全部背景需要是透明的。)

颜色需要是标准的rgb颜色的红绿黄。

抠图就直接用快速选择工具或者之类的抠图工具,把人物抠出来,再用油漆桶工具填充纯色,再把图片导出成png即可。

5.设置提示词等基本参数

提示词我是随便写的,因为就要一个男生一个女生出现在图像里,其他的就懒得写了,你如果对背景有要求可以加一些更丰富更细致的提示词。

采样器:dpm+2m sde karras

迭代步数step适度调高到25-30

图像尺寸比例参考你原来的底图,避免被压缩裁剪或拉伸变形。然后开始生成。

提醒一下,

如果你的小黑窗出现了报错,那么大概率additional networks出现了问题,虽然画面会出现两个人一男一女没问题,位置姿势也没问题,但你的lora未生效,要指定人物就完全无法做到。

类似下面这种报错。

报错的话,需要重新安装最新的additional networks再试。

而如果类似下面这种,没有lora报错,并且显示了应用蒙版通道apply mask channel,那么代表你这种用不同的lora控制不同的人物是成功且生效的。

6.你会发现生成的男女主基本都是稳定的形象,可以用lora很好控制人物形象和特征,保持人物的统一性,同时生成多人图像也不容易崩。

比如随着剧情推进,女主找上了前男友。(女主不变换男主)

男主一怒之下,找了个小三。(男主不变换女主)

啊这,有点狗血。(没办法,狗血的剧情才有更多人喜欢看)

7.接着,我们再回来教程这里,如果说,两人场景控制人物形象和面容能比较容易实现,那么三人场景能否做到呢?答案是可以的。

比如我们祭出这张李寻欢同学的名场面图片。

同样用上面的处理方式一步一步来生成。

然后我们可以得到这样的图。

如果你喜欢大女主,不想让臭男人左拥右抱,那么可不可以呢?可以。

但是三个人的控制程度比两个人的控制更难一些,很难指定某个人物用特定某个lora,还需要多生成一些图像来抽卡,才能得到相对满意的图像。

但至少,比之前生成2-3人的图像,相对来说已经可控高了不少。

不管你用来做小说配图还是插画什么的,都方便很多。

感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。

若有侵权,请联系删除

相关推荐
yuzhangfeng12 小时前
【 模型】 开源图像模型Stable Diffusion入门手册
stable diffusion
机器学习是魔鬼20 小时前
LLaMA-Factory 上手即用教程
llama·模型训练·ai功能岛·矩池云
浪淘沙jkp1 天前
(一)Ubuntu22.04服务器端部署Stable-Diffusion-webui AI绘画环境
ai作画·stable diffusion
白云如幻2 天前
最新智能AI问答运营系统(SparkAi)一站式AIGC系统,GPT-4.0/GPT-4o多模态模型+联网搜索提问+AI绘画+管理后台,用户会员套餐
人工智能·ai作画·midjourney
kebijuelun2 天前
阿里数字人工作 Emote Portrait Alive (EMO):基于 Diffusion 直接生成视频的数字人方案
人工智能·语言模型·stable diffusion·aigc·音视频
李歘歘5 天前
Stable Diffusion概要讲解
stable diffusion
davenian6 天前
<AI 学习> 下载 Stable Diffusions via Windows OS
学习·stable diffusion
graphyer6 天前
AGI自学分享,简单有用的理论与实践
ai·ai绘画·agi·ai文本
AI极客菌9 天前
[ComfyUI]Flux:繁荣生态魔盒已开启,6款LORA已来,更有MJ6&写实&动漫&风景&艺术&迪士尼全套
ai作画·stable diffusion·aigc·midjourney·人工智能作画·comfyui·风景
许野平9 天前
Stable Diffusion:照片转视频插件
stable diffusion·animatediff·temporal·照片转视频