【深度学习】Fine-Grained Face Swapping via Regional GAN Inversion高保真换脸范式

文章目录

代码

https://github.com/e4s2022/e4s

介绍

Fine-Grained Face Swapping via Regional GAN Inversion

提出一种新的高保真换脸范式,能够保留期望的微妙几何和纹理细节。从微观面部编辑的角度重新思考换脸任务,基于"编辑用于互换(editing for swapping)"(E4S)的原则,提出了一种基于面部组件形状和纹理的显式解耦方法。

遵循E4S原则,实现面部特征的全局和局部互换,以及由用户指定的部分互换。此外,E4S范式通过面部遮罩固有地处理面部遮挡问题。核心是一种新的区域GAN逆映射(RGI)方法,它允许显式解耦形状和纹理,同时允许在StyleGAN的潜在空间中进行面部互换。具体来说,设计了一个多尺度遮罩引导编码器,将每个面部组件的纹理投影到区域样式码中。还设计了一个遮罩引导注入模块,用样式码操作特征映射。基于解耦,面部互换被重新制定为样式和遮罩互换的简化问题。

与现有技术的大量实验和比较表明,方法在保留纹理和形状细节方面以及处理高分辨率图像方面具有优越性。项目页面地址为https://e4s2022.github.io

实践

设置好这2个参数后,执行python face_swap.py

效果

感觉不太好的效果:



帮助、问询

cpp 复制代码
https://docs.qq.com/sheet/DUEdqZ2lmbmR6UVdU?tab=BB08J2
相关推荐
咕噜企业分发小米几秒前
阿里云与华为云AI教育生态重构中,企业如何参与?
人工智能·阿里云·华为云
啊巴矲几秒前
小白从零开始勇闯人工智能:深度学习初级篇(卷积神经网络上)
人工智能·深度学习·cnn
菠萝.吹.雪2 分钟前
1.机器学习与深度学习
人工智能·深度学习·机器学习
qinyia3 分钟前
如何安全清理以 amis 开头的容器与镜像
运维·数据库·人工智能·mysql·ssh
AI街潜水的八角4 分钟前
基于keras框架的Vgg深度学习神经网络衣服多标签分类识别系统
深度学习·神经网络·keras
咕噜企业分发小米6 分钟前
阿里云和华为云在AI教育领域的生态重构具体会带来哪些影响?
人工智能·阿里云·华为云
Coder_Boy_9 分钟前
基于SpringAI的智能推荐影视平台设计和业务思路
大数据·人工智能·spring boot·spring cloud·langchain
AI生成未来9 分钟前
复刻“黑客帝国”子弹时间!SpaceTimePilot:视频变可操控4D游戏,倒放/变速/运镜随你掌控
人工智能·aigc·扩散模型·视频生成
福客AI智能客服9 分钟前
客服系统AI:数字文创电商的权属安全保障与体验升级核心
大数据·人工智能
melonbo17 分钟前
自动驾驶场景下的图像预处理
人工智能·机器学习·自动驾驶