数字人的形象克隆与语音克隆是伪需求

形象克隆与语音克隆技术,在当前的环境上已经可以成熟的实现,但真的解决了痛点问题吗?

普通人或者一般的公司克隆自己内部人的形象有必要吗?对外界而言,克隆的形象与虚拟的形象并无二致,本身并没有什么知名度,克隆后也不会有大的改观,除非你想立这个人设,所以,没有知名度的人物的形象克隆都是伪需求。

再说声音克隆,存在同样的问题。除非你的声音非常有特色,比如高德地图里很多特色的语音包都是这种需求。

网红、知名IP、知名企业家、明星等等,他们有形象克隆与语音克隆的需求,其它的话并不是很站的住脚。你猎奇想自己玩玩可以,想规模化商用,你需要承担巨大的成本,至少目前来看是这样。

再说到成本,据笔者所知,火山引擎克隆语音的成本算是在很多大平台里,算比较便宜的,差不多150元一个(不支持更新),但并发很低,想规模化商用,需要购买并发,几千元每个并发每月的成本,也不是随便一个素人能够承担的起的。讯飞或者序列猴子等平台,语音克隆一个更是上万元起步,有时候还需要很多训练素材,比如微软,就需要差不多近小时语音素材,使用体验并不是很友好。

如果是嘴形驱动的形象克隆,只有头部有动作、眼睛眨眼、张嘴说话等等,其余都保持静态。如果想有动作,就需要360度实景拍摄才能达到几个标准动作,多余的动作同样的是不能有的,因为要应对不同的文字内容,非标准的动作让人觉得动作与内容不匹配。

所以,目前为止很多非实时的视频里,嘴形还是能比较完整的贴合内容,如果想实时的嘴形驱动,这个成本基本就是按分钟计算,实时的流式输出与用户互动,带宽及算力要求极高。

相关推荐
sp_fyf_202411 分钟前
【大语言模型】ACL2024论文-19 SportsMetrics: 融合文本和数值数据以理解大型语言模型中的信息融合
人工智能·深度学习·神经网络·机器学习·语言模型·自然语言处理
CoderIsArt14 分钟前
基于 BP 神经网络整定的 PID 控制
人工智能·深度学习·神经网络
开源社28 分钟前
一场开源视角的AI会议即将在南京举办
人工智能·开源
FreeIPCC28 分钟前
谈一下开源生态对 AI人工智能大模型的促进作用
大数据·人工智能·机器人·开源
机器之心1 小时前
全球十亿级轨迹点驱动,首个轨迹基础大模型来了
人工智能·后端
z千鑫1 小时前
【人工智能】PyTorch、TensorFlow 和 Keras 全面解析与对比:深度学习框架的终极指南
人工智能·pytorch·深度学习·aigc·tensorflow·keras·codemoss
EterNity_TiMe_1 小时前
【论文复现】神经网络的公式推导与代码实现
人工智能·python·深度学习·神经网络·数据分析·特征分析
机智的小神仙儿1 小时前
Query Processing——搜索与推荐系统的核心基础
人工智能·推荐算法
AI_小站1 小时前
RAG 示例:使用 langchain、Redis、llama.cpp 构建一个 kubernetes 知识库问答
人工智能·程序人生·langchain·kubernetes·llama·知识库·rag
Doker 多克1 小时前
Spring AI 框架使用的核心概念
人工智能·spring·chatgpt