简单4步,带你用华为云MetaStudio制作数字人短片

本文分享自华为云社区《使用MetaStudio生产线四步制作数字人视频》,作者: yd_298097624。

随着AIGC新技术尤其是大模型技术的发展,音视频行业、数字内容生产行业正在经历这从生产方式和生产效率上的一个巨大变化。预测到2030年由AI大模型生成的数字内容比例将高达90%,包括通过AIGC来生成数字人,数字人视频等,本博文就来教大家如何用华为云MetaStudio数字内容生产线制作数字人视频。本文介绍了两种制作数字人视频的方式,一种直接在console上操作,另一种用API制作。

1 开通MetaStudio服务

进入【数字内容生产线MetaStudio】,在搜索框中输入MetaStudio,点击进入服务。

点击【分身数字人视频制作】的【开通】按钮。

点击【前往MetaStudio工作台】。

2 工作台制作视频

2.1 进入分身视频制作

点击【分身视频制作】的【开始创建】按钮,进入工作台。

2.2 选择数字人模型

点击【角色】按钮,可以查看所有系统内置的数字人模型,选择一个用来制作视频。

2.3 选择视频背景

点击【背景】按钮,可以查看所有系统内置的背景图片,选择一个用来制作视频。

2.4 选择音色和输入视频文案内容

点击【亲切女声】按钮,可以查看所有系统内置的音色,选择一个用来制作视频。

将下列文本拷贝到文本输入框中。

MetaStudio数字内容生产线依托自研的图形引擎MetaEngine、国产昇腾AI云服务器算力;提供3D IP型数字人、2D分身数字人快速生成及定制服务;AI重塑数字内容生产,使能视频制作、直播、交互应用。

2.5 合成视频

点击【合成视频】按钮,输入合成视频的文件名,点击【确认】按钮开始合成。

可以通过刷新按钮查看合成进度。

视频制作完成后,点击封面,可以查看视频内容。

3 API制作数字人视频

3.1 进入API Explorer

通过下面URL进入API Explorer。
console.huaweicloud.com/apiexplorer...

产品选择【数字内容生产线】

区域选择【华北-北京4】

3.2 查找数字人模型

通过【查询资产列表】接口查询模型资产。

参数设置:

asset_type:HUMAN_MODEL_2D

asset_source:SYSTEM

请求成功后,在响应体里选择一个模型的资产id,记录下来。

3.3 查找视频背景

通过【查询资产列表】接口查询背景资产。

参数设置:

asset_type:IMAGE

asset_sourc:SYSTEM

system_property:BACKGROUND_IMG:Yes

请求成功后,在响应体里选择一个背景资产的download_url,记录下来。

注意:可以将limit设置成1,这样响应体不会过大。

3.4 查询音色

通过【查询资产列表】接口查询音色资产。

参数设置:

asset_type:VOICE_MODEL

asset_source:SYSTEM

请求成功后,在响应体里选择一个音色的资产id,记录下来。

3.5 创建视频制作任务

通过【创建分身数字人视频制作任务】接口创建任务。

此接口参数较多,先开启【填写默认值】。

参数设置:

css 复制代码
video_making_type:MODELmodel_asset_id:填写3.2步骤里请求的数字人模型资产idvoice_config.voice_asset_id:填写3.4步骤里请求的音色资产idvideo_config.codec:H264video_config.bitrate:40video_config.width:1920video_config.height:1080shoot_scripts.shoot_script.text_config.text:视频文案shoot_scripts.shoot_script.background_config:IMAGEshoot_scripts.shoot_script.background_config:填写3.3步骤里请求的背景图片下载地址layer_config:设置为空数组output_asset_config.asset_name:输出视频文件名callback_config.callback_url:空字符串{"video_making_type": "MODEL","model_asset_id": "d02595480275db780375185ead1cc3da","voice_config": {"voice_asset_id": "c20e1b59495d3186ef72226fb1e6701b","speed": 100,"pitch": 100,"volume": 140},"video_config": {"clip_mode": "RESIZE","codec": "H264","bitrate": 40,"width": 1920,"height": 1080,"frame_rate": "25","is_subtitle_enable": false,"subtitle_config": {"font_name": "HarmonyOS_Sans_SC_Black","font_size": 16}},"shoot_scripts": [{"shoot_script": {"script_type": "TEXT","text_config": {"text": "这是一个数字人视频"},"background_config": [{"background_type": "IMAGE","background_config": "https://metastudio.obs.cn-north-4.myhuaweicloud.com:443/SYSTEM/d6e7dde03cab4ce06f2c3cbb19f2682c/9fd37af847980ae086c98d282570bd72.png?AWSAccessKeyId=V4JN2MVQB83TCU121H6L&Expires=1714180482&response-content-disposition=attachment%3B+filename*%3Dutf-8''%E6%96%87%E6%97%85%E9%A3%8E3.png&x-amz-security-token=ggpjbi1ub3J0aC00TX97ImFjY2VzcyI6IlY0Sk4yTVZRQjgzVENVMTIxSDZMIiwibWV0aG9kcyI6WyJ0b2tlbiJdLCJyb2xlIjpbXSwicm9sZXRhZ2VzIjpbXSwidGltZW91dF9hdCI6MTcxNDE4NDUyOTAzMSwidXNlciI6eyJPUy1GRURFUkFUSU9OIjp7Imdyb3VwcyI6W3siaWQiOiIyMjZkYTBmNzQyZDc0MjEzOTAwNjFkZDA1YmUyMGYwZCIsIm5hbWUiOiJjc21zLW9pZGMifV0sImlkZW50aXR5X3Byb3ZpZGVyIjp7ImlkIjoib2lkYy1vcC1NU1MifSwicHJvdG9jb2wiOnsiaWQiOiJvaWRjIn19LCJkb21haW4iOnsiaWQiOiIyZGQwYjdlMTI0MWY0ZDNmOWVlNGE3NjZiMmI1MTAxMSIsIm5hbWUiOiJvcF9zdmNfTWV0YVN0dWRpb19jb250YWluZXIwIn0sImlkIjoiNGJVNzd4SklNMU1Ya1RXWlVtcUc2S2ZZWkNCMkZjM2QiLCJuYW1lIjoiRmVkZXJhdGlvblVzZXIiLCJwYXNzd29yZF9leHBpcmVzX2F0IjoiIiwidXNlcl90eXBlIjo0OH19RWjKsVx3tBB9rC9epefZhRbuWZ5quEBfoMuJWu66lk5-UVSfeQqJ4QA9GH6OzoEfhOS0cUGCYtanfHaUlXyVOZ_-jZ8vaLJuVkjL9fmZWnnsAivrmok0bXud5_EmY9BEg96U1wC4vM-SpZlX7xxQO76EHrXjzSYpN3VCZzBF68kZ6rb8HOx8LjWrt__KwYWBxzTMnnLIht0xw0zo6mdaRJBiWOU1QZ1tJeX-cHuE4j88USL8KY08a8ZtvRl4OOs_9sy2bGO4kySItQhtUJBn_EZG3iC5k0imb7LEhAAMN_yHrb_VJz5nGGEuP0tbVBlJacEQSsVx1qJzFbYkYdwuBw%3D%3D&Signature=sn5CCeq4rXdQBd76p6R8Wu6185I%3D","background_color_config": "#FFFFFF"}],"emotion_config": [{"emotion": "HAPPY"}],"layer_config": []}}],"output_asset_config": {"asset_name": "output","is_preview_video": false},"background_music_config": {"volume": 100},"callback_config": {"callback_url": " ","auth_type": "NONE"}}请求成功后,在响应体里返回任务id。

3.6 查询任务进度

通过【查询分身数字人视频制作任务详情】接口查询任务进度

参数设置:

job_id:填写步骤3.5里返回的任务id

当前状态:

WAITING:等待服务器调度

PRCOCESSING:正在制作

FAILED:制作失败,可以在error_info里查看失败原因

SUCCESS:制作成功

制作成功后,记录下响应体里返回的视频资产id

3.7 查看输出视频

通过【查询资产详情】接口查看输出视频。

参数设置:

asset_id:填写步骤3.6里记录的视频资产id

请求成功后,在响应体里查看视频的download_url。

将download_url复制后,在浏览器中打开,就可以下载到本地了。

文末给大家放一个小福利,仅需19.9元即可制作60分钟的数字人视频啦!activity.huaweicloud.com/metastudio-...

HDC 2024,6月21日-23日,东莞松山湖,期待与您相见!

更多详情请关注官网:

中文:developer.huawei.com/home/hdc

英文:developer.huawei.com/home/en/hdc

点击关注,第一时间了解华为云新鲜技术~

相关推荐
深度学习实战训练营27 分钟前
基于keras的停车场车位识别
人工智能·深度学习·keras
乔代码嘚34 分钟前
AI2.0时代,普通小白如何通过AI月入30万
人工智能·stable diffusion·aigc
墨@#≯34 分钟前
机器学习系列篇章0 --- 人工智能&机器学习相关概念梳理
人工智能·经验分享·机器学习
Elastic 中国社区官方博客42 分钟前
Elasticsearch:使用 LLM 实现传统搜索自动化
大数据·人工智能·elasticsearch·搜索引擎·ai·自动化·全文检索
_.Switch1 小时前
Python机器学习模型的部署与维护:版本管理、监控与更新策略
开发语言·人工智能·python·算法·机器学习
XiaoLiuLB1 小时前
ChatGPT Canvas:交互式对话编辑器
人工智能·自然语言处理·chatgpt·编辑器·aigc
Hoper.J1 小时前
PyTorch 模型保存与加载的三种常用方式
人工智能·pytorch·python
菜就多练_08281 小时前
《深度学习》OpenCV 摄像头OCR 过程及案例解析
人工智能·深度学习·opencv·ocr
达柳斯·绍达华·宁1 小时前
CNN中的平移不变性和平移等变性
人工智能·神经网络·cnn
技术无疆2 小时前
【Python】Streamlit:为数据科学与机器学习打造的简易应用框架
开发语言·人工智能·python·深度学习·神经网络·机器学习·数据挖掘