UE5 Audio2Face导出USD表情与ARKIT表情重定向

安装Audio2Face

下载NVIDIA Omniverse Launcher

登录后选择交易所

选择Audio2Face

回到图书馆,点击启动

使用Audio2Face并输出面部USD

选择Claire_solved_arkit,右上角选择Auidio2Face Tool

TrackRootPath选择人声的路径

会自动定位Wav文件

右上角选择A2F Data Conversion

点击Blendshape后选择usd格式,点击export weights

导出目录在C:\Users\1\Documents\Kit\shared\capture

导出后在交易所安装UE的usd插件

在UE安装Audio2Face插件

同时,在Audio2face的安装目录下面找到ue-plugins,在这里找到OmniverseLiveLink,把这个文件夹复制到UE目录下的Plugins目录下

目录如下C:\Users\1\AppData\Local\ov\pkg\audio2face-2023.1.1\ue-plugins\audio2face-ue-plugins\Audio2FaceUnrealPlugin-5.1.15\OmniverseLiveLink

进入UE内,开启插件

导入Audio2face生成的USD

重启引擎,在文件管理内容下右键就可以看见Import usd animation

点击import,这里选择usd路径和你的模型骨骼

USD曲线重定向到Arkit

导入后是一个通用的arkit曲线,我们需要在动画蓝图内把他转化成指定的曲线

在动画蓝图内使用Modify Curve把map拉出变量,使用make map.在GetCurveValue内把每一根曲线的名字对应到make map内即可

把曲线放入Cache内,最后output

10/12

优化

使用数据表精简重定向蓝图

新建一个结构体

再新建一个数据表,里面有USD的名称和变形的名称,还有要乘的强度

新建数据表变量和NameMap变量

最后在动画蓝图里面添加ModifyCurve,Map是新建的map

相关推荐
日月云棠4 天前
UE5源码分析之Editor——Blutility模块全面分析
ue5
日月云棠4 天前
UE5源码分析之Editor——BehaviorTreeEditor模块全面分析
ue5
日月云棠4 天前
UE5源码分析之Editor——AssetTagsEditor模块全面分析
ue5
远离UE45 天前
UE5 显存 虚拟内存 深入学习笔记
笔记·学习·ue5
日月云棠5 天前
UE5源码分析之Editor——AnimationSettings模块全面分析
ue5
远离UE46 天前
UE5 SF_VertexShader 如何使用
ue5
电子云与长程纠缠6 天前
UE5 Lyra PocketWorld进行3D内容UI预览 - 上
开发语言·学习·3d·ue5·游戏引擎
电子云与长程纠缠6 天前
UE5 Lyra PocketWorld进行3D内容UI预览 - 下
开发语言·学习·游戏·ui·ue5
远离UE47 天前
UE5 GPU内部异步
ue5
1204157137 肖哥7 天前
UE5 PCG PCGBlueprintElement简介
ue5