AI绘画 Stable Diffusion【应用篇】【角色一致性】:如何从不同视角创造一致的人物角色?

您是否需要从不同的视角创建一致的 AI 角色?例如下面的图片效果。


一. 实现原理

制作一张同一个人物角色不同的视角网格图片,如下图所示。

使用ControlNet的Canny SDXL控制模型生成人物角色轮廓,如下图所示。

然后使用 IP Apadter FaceID Plus v2 从另一个参考图像复制面部。由于IP Apadter

FaceID仅复制面部。它可以从参考图像中精确提取面部特征,因此可以准确地将面部转移到不同的视角。

二. 制作方法

【第一步】:大模型的选择

这里推荐使用:ProtoVision XL-High Fidelity-No Refiner,版本v6.6.0。

模型下载地址(文末网盘地址也可获取)

LiblibAI:https://www.liblib.art/modelinfo/3a3d10aa7fe644158c08a5a43da358db

【第二步】:提示词的编写

我们以上图中第一张图片为例来进行说明。

正向提示词

Prompt:character sheet, color photo of woman, white background, blonde long

hair, beautiful eyes, black shirt

提示词:人物表,女人的彩色照片,白色背景,金发长发,美丽的眼睛,黑色衬衫

反向提示词

disfigured, deformed, ugly, text, logo

相关参数设置

  • 采样器:DPM++ 2M Karras
  • 采样迭代步数:20
  • 图片宽高:1024*1024。
  • 提示词引导系数(CFG):7

【第三步】:ControlNet的设置

这里我们需要配置2个ControlNet单元。

ControlNet单元0:canny控制模型配置

相关参数设置如下:

  • 控制类型:选择"Canny(硬边缘)"

  • 预处理器:canny

  • 模型:diffusers_xl_canny_mid

  • 控制权重:0.4

  • 引导介入时机:0

  • 引导终止时机:0.5

ControlNet单元1:Ip-Adapter控制模型配置

相关参数设置如下:

  • 控制类型:选择"IP-Adapter"

  • 预处理器:ip-adapter_face_id_plus

  • 模型:ip-adapter-faceid-plusv2_sdxl

  • 控制权重:0.7

  • 引导介入时机:0

  • 引导终止时机:1

【第四步】:使用 ADetailer 自动修复脸部

由于图片中人脸较多,需要开启ADetailer修复脸部。模型选择:face_yolov8n.pt

【第五步】图片的生成

点击【生成】按钮,我们来看一下最终生成的图片效果。

`

写在最后

感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。

相关推荐
johnny23330 分钟前
AI工作流编排平台
人工智能
百***35481 小时前
DeepSeek在情感分析中的细粒度识别
人工智能
Qzkj6661 小时前
从规则到智能:企业数据分类分级的先进实践与自动化转型
大数据·人工智能·自动化
weixin79893765432...2 小时前
React + Fastify + DeepSeek 实现一个简单的对话式 AI 应用
人工智能·react.js·fastify
大千AI助手2 小时前
概率单位回归(Probit Regression)详解
人工智能·机器学习·数据挖掘·回归·大千ai助手·概率单位回归·probit回归
狂炫冰美式3 小时前
3天,1人,从0到付费产品:AI时代个人开发者的生存指南
前端·人工智能·后端
LCG元3 小时前
垂直Agent才是未来:详解让大模型"专业对口"的三大核心技术
人工智能
我不是QI3 小时前
周志华《机器学习—西瓜书》二
人工智能·安全·机器学习
操练起来4 小时前
【昇腾CANN训练营·第八期】Ascend C生态兼容:基于PyTorch Adapter的自定义算子注册与自动微分实现
人工智能·pytorch·acl·昇腾·cann
KG_LLM图谱增强大模型4 小时前
[500页电子书]构建自主AI Agent系统的蓝图:谷歌重磅发布智能体设计模式指南
人工智能·大模型·知识图谱·智能体·知识图谱增强大模型·agenticai