简单4步,带你用华为云MetaStudio制作数字人短片

本文分享自华为云社区《使用MetaStudio生产线四步制作数字人视频》,作者: yd_298097624。

随着AIGC新技术尤其是大模型技术的发展,音视频行业、数字内容生产行业正在经历这从生产方式和生产效率上的一个巨大变化。预测到2030年由AI大模型生成的数字内容比例将高达90%,包括通过AIGC来生成数字人,数字人视频等,本博文就来教大家如何用华为云MetaStudio数字内容生产线制作数字人视频。本文介绍了两种制作数字人视频的方式,一种直接在console上操作,另一种用API制作。

1 开通MetaStudio服务

进入【数字内容生产线MetaStudio】,在搜索框中输入MetaStudio,点击进入服务。

点击【分身数字人视频制作】的【开通】按钮。

点击【前往MetaStudio工作台】。

2 工作台制作视频

2.1 进入分身视频制作

点击【分身视频制作】的【开始创建】按钮,进入工作台。

2.2 选择数字人模型

点击【角色】按钮,可以查看所有系统内置的数字人模型,选择一个用来制作视频。

2.3 选择视频背景

点击【背景】按钮,可以查看所有系统内置的背景图片,选择一个用来制作视频。

2.4 选择音色和输入视频文案内容

点击【亲切女声】按钮,可以查看所有系统内置的音色,选择一个用来制作视频。

将下列文本拷贝到文本输入框中。

MetaStudio数字内容生产线依托自研的图形引擎MetaEngine、国产昇腾AI云服务器算力;提供3D IP型数字人、2D分身数字人快速生成及定制服务;AI重塑数字内容生产,使能视频制作、直播、交互应用。

2.5 合成视频

点击【合成视频】按钮,输入合成视频的文件名,点击【确认】按钮开始合成。

可以通过刷新按钮查看合成进度。

视频制作完成后,点击封面,可以查看视频内容。

3 API制作数字人视频

3.1 进入API Explorer

通过下面URL进入API Explorer。
console.huaweicloud.com/apiexplorer...

产品选择【数字内容生产线】

区域选择【华北-北京4】

3.2 查找数字人模型

通过【查询资产列表】接口查询模型资产。

参数设置:

asset_type:HUMAN_MODEL_2D

asset_source:SYSTEM

请求成功后,在响应体里选择一个模型的资产id,记录下来。

3.3 查找视频背景

通过【查询资产列表】接口查询背景资产。

参数设置:

asset_type:IMAGE

asset_sourc:SYSTEM

system_property:BACKGROUND_IMG:Yes

请求成功后,在响应体里选择一个背景资产的download_url,记录下来。

注意:可以将limit设置成1,这样响应体不会过大。

3.4 查询音色

通过【查询资产列表】接口查询音色资产。

参数设置:

asset_type:VOICE_MODEL

asset_source:SYSTEM

请求成功后,在响应体里选择一个音色的资产id,记录下来。

3.5 创建视频制作任务

通过【创建分身数字人视频制作任务】接口创建任务。

此接口参数较多,先开启【填写默认值】。

参数设置:

css 复制代码
video_making_type:MODELmodel_asset_id:填写3.2步骤里请求的数字人模型资产idvoice_config.voice_asset_id:填写3.4步骤里请求的音色资产idvideo_config.codec:H264video_config.bitrate:40video_config.width:1920video_config.height:1080shoot_scripts.shoot_script.text_config.text:视频文案shoot_scripts.shoot_script.background_config:IMAGEshoot_scripts.shoot_script.background_config:填写3.3步骤里请求的背景图片下载地址layer_config:设置为空数组output_asset_config.asset_name:输出视频文件名callback_config.callback_url:空字符串{"video_making_type": "MODEL","model_asset_id": "d02595480275db780375185ead1cc3da","voice_config": {"voice_asset_id": "c20e1b59495d3186ef72226fb1e6701b","speed": 100,"pitch": 100,"volume": 140},"video_config": {"clip_mode": "RESIZE","codec": "H264","bitrate": 40,"width": 1920,"height": 1080,"frame_rate": "25","is_subtitle_enable": false,"subtitle_config": {"font_name": "HarmonyOS_Sans_SC_Black","font_size": 16}},"shoot_scripts": [{"shoot_script": {"script_type": "TEXT","text_config": {"text": "这是一个数字人视频"},"background_config": [{"background_type": "IMAGE","background_config": "https://metastudio.obs.cn-north-4.myhuaweicloud.com:443/SYSTEM/d6e7dde03cab4ce06f2c3cbb19f2682c/9fd37af847980ae086c98d282570bd72.png?AWSAccessKeyId=V4JN2MVQB83TCU121H6L&Expires=1714180482&response-content-disposition=attachment%3B+filename*%3Dutf-8''%E6%96%87%E6%97%85%E9%A3%8E3.png&x-amz-security-token=ggpjbi1ub3J0aC00TX97ImFjY2VzcyI6IlY0Sk4yTVZRQjgzVENVMTIxSDZMIiwibWV0aG9kcyI6WyJ0b2tlbiJdLCJyb2xlIjpbXSwicm9sZXRhZ2VzIjpbXSwidGltZW91dF9hdCI6MTcxNDE4NDUyOTAzMSwidXNlciI6eyJPUy1GRURFUkFUSU9OIjp7Imdyb3VwcyI6W3siaWQiOiIyMjZkYTBmNzQyZDc0MjEzOTAwNjFkZDA1YmUyMGYwZCIsIm5hbWUiOiJjc21zLW9pZGMifV0sImlkZW50aXR5X3Byb3ZpZGVyIjp7ImlkIjoib2lkYy1vcC1NU1MifSwicHJvdG9jb2wiOnsiaWQiOiJvaWRjIn19LCJkb21haW4iOnsiaWQiOiIyZGQwYjdlMTI0MWY0ZDNmOWVlNGE3NjZiMmI1MTAxMSIsIm5hbWUiOiJvcF9zdmNfTWV0YVN0dWRpb19jb250YWluZXIwIn0sImlkIjoiNGJVNzd4SklNMU1Ya1RXWlVtcUc2S2ZZWkNCMkZjM2QiLCJuYW1lIjoiRmVkZXJhdGlvblVzZXIiLCJwYXNzd29yZF9leHBpcmVzX2F0IjoiIiwidXNlcl90eXBlIjo0OH19RWjKsVx3tBB9rC9epefZhRbuWZ5quEBfoMuJWu66lk5-UVSfeQqJ4QA9GH6OzoEfhOS0cUGCYtanfHaUlXyVOZ_-jZ8vaLJuVkjL9fmZWnnsAivrmok0bXud5_EmY9BEg96U1wC4vM-SpZlX7xxQO76EHrXjzSYpN3VCZzBF68kZ6rb8HOx8LjWrt__KwYWBxzTMnnLIht0xw0zo6mdaRJBiWOU1QZ1tJeX-cHuE4j88USL8KY08a8ZtvRl4OOs_9sy2bGO4kySItQhtUJBn_EZG3iC5k0imb7LEhAAMN_yHrb_VJz5nGGEuP0tbVBlJacEQSsVx1qJzFbYkYdwuBw%3D%3D&Signature=sn5CCeq4rXdQBd76p6R8Wu6185I%3D","background_color_config": "#FFFFFF"}],"emotion_config": [{"emotion": "HAPPY"}],"layer_config": []}}],"output_asset_config": {"asset_name": "output","is_preview_video": false},"background_music_config": {"volume": 100},"callback_config": {"callback_url": " ","auth_type": "NONE"}}请求成功后,在响应体里返回任务id。

3.6 查询任务进度

通过【查询分身数字人视频制作任务详情】接口查询任务进度

参数设置:

job_id:填写步骤3.5里返回的任务id

当前状态:

WAITING:等待服务器调度

PRCOCESSING:正在制作

FAILED:制作失败,可以在error_info里查看失败原因

SUCCESS:制作成功

制作成功后,记录下响应体里返回的视频资产id

3.7 查看输出视频

通过【查询资产详情】接口查看输出视频。

参数设置:

asset_id:填写步骤3.6里记录的视频资产id

请求成功后,在响应体里查看视频的download_url。

将download_url复制后,在浏览器中打开,就可以下载到本地了。

文末给大家放一个小福利,仅需19.9元即可制作60分钟的数字人视频啦!activity.huaweicloud.com/metastudio-...

HDC 2024,6月21日-23日,东莞松山湖,期待与您相见!

更多详情请关注官网:

中文:developer.huawei.com/home/hdc

英文:developer.huawei.com/home/en/hdc

点击关注,第一时间了解华为云新鲜技术~

相关推荐
后端小张9 小时前
智眼法盾:基于Rokid AR眼镜的合同条款智能审查系统开发全解析
人工智能·目标检测·计算机视觉·ai·语言模型·ar·硬件架构
dalalajjl9 小时前
每个Python开发者都应该试试知道创宇AiPy!工作效率提升500%的秘密武器
大数据·人工智能
wheeldown9 小时前
【Rokid+CXR-M】基于Rokid CXR-M SDK的博物馆AR导览系统开发全解析
c++·人工智能·ar
爱看科技9 小时前
AI智能计算竞赛“战火重燃”,谷歌/高通/微美全息构建AI全栈算力开启巅峰角逐新篇
人工智能
IT_陈寒9 小时前
Redis性能翻倍的5个冷门技巧,90%开发者都不知道第3个!
前端·人工智能·后端
晨非辰9 小时前
C++ 波澜壮阔 40 年:从基础I/O到函数重载与引用的完整构建
运维·c++·人工智能·后端·python·深度学习·c++40周年
鼎道开发者联盟9 小时前
智能原生操作系统畅想:人智共生新时代的基石
人工智能·机器学习·自然语言处理
这张生成的图像能检测吗12 小时前
(论文速读)EfficientTrain++: 高效视觉骨干训练的通用课程学习
人工智能·深度学习·计算机视觉·训练方法