白嫖小云雀 API 200 秒免费额度,封装 Skill,玩转 Seedance2.0 视频

大家好,我是小肥肠。五一出去玩了几天,昨天才到家,想着写一下我节前做的一个skill,五一前我发现小云雀开放API了,还有200秒免费额度,当天就接入了skill并且基于我的数字人做了一个AI脱口秀视频。如果你也想看看如何走API调用Seedance2.0或者想学习AI数字人脱口秀制作,这篇文章或许对你有帮助~

1. Seedance2.0的API个人用户也可以调用了

节前我发现小云雀API集成到了火山引擎,同时还有200秒免费调用额度,这对于想尝试Seedance2.0但是对于它的成本望而却步的用户和想通过API调用Seedance2.0的用户来说,都是天大的好消息。

我看了一下接口文档,接入并不复杂,就是一个异步接口,只要做简单流程规划就行,核心是图生视频中素材上传、多参数传递、异步接口轮询结果这几个小小难点,把步骤排列好,skill的制作就很简单。

我花了几天时间完成了这个skill的制作和调试,同时做了一条最近比较火的AI数字人脱口秀视频:

2. skill架构解析及接入workbuddy运行

2.1 xfc-xyq架构和技术路线说明

这个skill我给它取了一个名字叫xfc-xyq,其架构如下图所示。

skill的运行逻辑用稍微白话一点来说就是以下几步:

  1. 用户提交Seedance2.0生视频指令,包括模式(图生视频|文生视频)、比例指定(16:9|9:16)、生成时长、提示词等参数

  2. 如果用户提交了图片则oss_uploader.py会将图片上传到oss对象存储中(需要优先配置好oss存储桶为可以通过公网访问)

  3. workflow.py将前置参数整合提交到视频生成任务,因为小云雀API视频生成任务的异步的,所以只会返回一个task_idvolc_client.py来轮询task_id来查看视频生成进度。用白话来说就像你去吃火锅,但是那个火锅店生意火爆,你不能直接进店,而是得到了一张排队券,你需要隔阵子查一下排队进度。

2.2 如何让Seedance2.0的API支持真人素材

今年AI真人短剧、AI脱口秀的热度都不错,很多社群内的群友来问我说怎么把sd2和真人素材结合,sd2卡脸实在太狠了,卡脸这个问题我在API调用的时候也遇到过了。

问了一下做这块的大佬,大佬给我的解决方案是生成人物解构图,类似下图这种:

核心就是五官解构,眼睛、鼻子、嘴巴、总体身形分开放,大家可以用我的图片去图生图,怎么做呢?分两步:

1.生成人物提示词,比如我这个人物,就是一个现代女生,穿墨绿色连帽卫衣,有着漂亮的杏眼,小巧高挺的鼻子和好看的嘴巴,还有一头齐腰的黑色大波浪卷发

2.把生成出来的人物参考已有的解构图(比如文中我这个图片)生成新的人物解构图

这一步很费时间,自己有点耐心慢慢调吧,我调了整整一天。。。

2.3 skill集成到workbuddy生成真人脱口秀视频

skill做完后集成workbuddy很简单,直接打一个压缩包上传到workbuddy中就好了。

接下来就是生成时刻了,我找了网上比较热门的一个AI脱口秀视频,用视频反推skill得到了视频提示词,视频反推skill指引:还在爆款 AI 视频下求提示词?我做了个自动反推视频提示词的 skill

workbuddy中加载skill进行基于真人素材的脱口秀视频制作(注意一下用AI生成的数字人或者你自己的照片,不要乱用别人的肖像)。

等待几分钟视频就生成好了:

成品视频:

到这里,xfc-xyq 的思路和实现过程,基本就讲清楚了。上述skill已经被收录到了小肥陪跑群中,需要原件可以加入社群直接使用哦。

2.4 我踩的坑

不得不说这个xfc-xyq接入容易,调试挺多坑,关键只有200秒试错,我把我踩过的坑整理一下供你们参考:

1. 水印

刚才生成的成品视频大家都看到了有水印,这个问题如何解决?

我的解决方案是提交请求时带显式参数-enable-watermark false,虽然这个参数我已经写在了配置文件里面,但是有时候还是会有水印,解决办法就是把去水印参数强制加到请求里作双重保险。

2. 模型

尽量用聪明的大模型,越聪明的大模型做的任务越漂亮,尽量用DeepSeek V4,MiniMax M2.7或者更高的。

3. skill|Openclaw|Hermes其实很简单

最近我打算开一个公众号漫画skill的训练营,教大家找到自己感兴趣的赛道,用skill做出漫画图片。目前为止报名的人挺多,大家都想系统学习一下漫画赛道以及怎么灵活用skill做出自己的心仪的漫画图片。但是我也发现一个问题,报名的很多同学很惧怕Openclaw| Hermes 这类框架,因为涉及到服务器部署,模型配置这类的技术问题,小白一般都望而却步。

小白们很担心的问题其实都有解决方案的,比如不想弄服务器部署可以用像workbuddy这样的工具部署一个本地小龙虾,安装方式也很简单:别再花钱找人"养虾"了!腾讯版OpenClaw发布,零门槛把AI塞进微信!,workbuddy内置也有模型,还送积分,我3月份装的现在积分还没用完:

话又说回来,有学习能力还是去冲一冲Hermes,Openclaw和Hermes两个框架我个人体感用下来更喜欢Hermes,它会自主沉淀记忆,同时会把固定流程自主沉淀封装成skill,我更喜欢的还有日志系统,打印得很细。Hermes的本地安装教程以及使用我计划录制一系列视频教程,当做我的免费公开课,感兴趣的朋友可以蹲一蹲。

4. 结语

小云雀这次开放 API 之后,确实把很多原本只能看看的人拉进场了。像我这种平时就喜欢自己接 skill、自己跑工作流的人,看到有免费额度,第一反应肯定就是先上手试试。

如果你最近也刚好想试试 Seedance2.0,又不想一上来就把流程想得太复杂,可以看看我这篇文章,希望对你有帮助~

相关推荐
~kiss~1 小时前
How OpenAI delivers low-latency voice AI at scale - OpenAI 如何规模化实现低延迟语音 AI
人工智能
河西石头1 小时前
听AI的血的教训!PPOCRLabel部署与PyQt5的安装避坑-百分百成功!
开发语言·人工智能·python·pyqt5安装·ppocrlabel的部署
BU摆烂会噶1 小时前
【LangGraph】 流式处理入门
人工智能·python·langchain·人机交互
星辰徐哥1 小时前
人工智能:计算机视觉的基础与应用
人工智能·计算机视觉·ai·预处理·特征提取
发哥来了1 小时前
东莞AI培训课程横向对比:五家机构教学与就业质量评测
大数据·人工智能·机器学习·ai·aigc
AI医影跨模态组学1 小时前
(综述)J Transl Med 浙江大学医学院附属第二医院等团队:放射组学在胶质母细胞瘤复发中的应用:预测、定位及与治疗相关效应鉴别的进展
人工智能·深度学习·医学·医学影像·影像组学
神工坊2 小时前
新闻︱神工坊受邀出席无锡人工智能产业园“AI赋能研发设计”主题活动,共探算力与AI时代下的CAE范式革新
人工智能·ai·hpc·cfd·cae·求解加速·智能修模
我是发哥哈2 小时前
东莞AI培训主流方案横向评测:5大选型维度解析
大数据·人工智能·学习·机器学习·chatgpt·ai编程
千寻girling2 小时前
机器学习 | 感知机 | 尚硅谷学习
人工智能·学习·机器学习