扣子(Coze)实战:语文课本突然不枯燥了!输入诗名,Coze一键让古诗词“活”过来

大家好,我是吾鳴。专注于分享提升工作与生活效率的工具,无偿分享AI领域相关的精选报告,持续关注AI的前沿动向。

最近发现一个很有意思的赛道,那就是AI古诗词赛道,这个赛道的内容就是语文课本中的一篇枯燥的文言文古诗词,把它变成一部古代的"短剧"。

"短剧"的内容就是带有画面感的文言文朗诵,搭配上背景音乐、真人可视化的画面,看着是非常的有感觉的。

也有人通过把这种类型的内容发布到了抖音上,几十个作品就已经涨粉30W+,获赞150W+,可见这类题材的受欢迎程度。

经过对这类作品的拆解,我发现可以使用扣子来一键生成,只需要输入古诗词名称、诗人名称,Coze就可以帮你自动的去生成这类的作品。

在开始工作流的讲解之前,我们先来看看工作流生成的古诗词视频效果,比如我输入的古诗词名称为"《出师表》",作者是"诸葛亮",点击运行,经过一段时间的等待,一条视频就生成好了(放不了视频,就放张图片吧)。

1. 完整的工作流程

这个视频生成的工作流比较复杂,所以我对它进行了划分,分别是【古诗词朗诵和字幕】、【古诗名和诗人名配音和字幕】、【古诗词视频分镜创作】、【生成剪映草稿】这四大部分。

整个工作流的节点较多,所以下面文章的讲解中,我不会逐个节点都做讲解,我会挑选每个部分中较为关键的节点进行讲解,相信有一直看我发的文章的朋友,对扣子官方的这些节点应该都很熟悉了。

关于如何使用扣子来制作视频,对Coze的视频工作流还不是特别了解的朋友,可以去看看我之前写的《每日听懂一首歌》系列的文章,里面有非常详细的拆解。

2. 古诗词朗诵和字幕

这部分的节点的作用是把输入的古诗词名称和诗人名称给到大模型,让它帮你找到这首古诗词原文,然后拆成小段落进行配音。

配音好之后,就把配音和小段落的文言文文案转成剪映的时间线。

2.1. 开始

  • gu_shi_name:古诗名称,必填
  • api_token:插件认证,需要可以后台联系获取(有条件),必填
  • gu_shi_author:古诗作者,必填
  • bgm:背景音乐,必填

2.2. 大模型-古诗词段落拆解

这个节点的作用就是接收古诗名称和诗人名称,对古诗词做段落拆解,使用到了扣子官方的大模型节点。

受限于文章的篇幅,系统提示词我放在了文末,感兴趣的朋友可以按照文末的方式领取。

2.3. 古诗朗读语音时间线

这个节点用于生成古诗词朗读语音在剪映上的时间线,使用到了扣子三方插件【视频剪辑工具箱】的【multi_audio_timeline】工具。

2.4. 古诗词文言文字幕时间线

这个节点的作用是用来生成文言文段落在剪映轨道上的字幕时间线,使用到了扣子三方插件【视频剪辑工具箱】的【multi_caption_timeline】。

3. 古诗名和诗人配音和字幕

这部分的内容就是用来生成古诗名称和诗人名称的配音和字幕用的,使用到的配音插件是扣子官方的【语音合成】插件。

剪映时间线生成工具使用到了和【2.3古诗朗读语音时间线】、【古诗词文言文字幕时间线】一样的三方插件。

这部分的内容比较简单,不详细展开讲述。

4. 古诗词视频分镜创作

这部分的内容就是用来制作视频的分镜用的,它会先对零散的古诗文言文段落进行合并,使得每个分镜都能控制在10秒以内,便于制作视频。

分镜视频制作的流程是先让模型生成分镜的绘图提示词和视频提示词,然后再通过绘图提示词先生成图片,最后由图片再生成视频。

生图模型使用到了扣子官方的Seedream4.0,视频生成模型使用到了扣子官方的doubao-seedance-pro,本想做有声视频的,但是doubao-seedance-1.5-pro老是超时,便放弃了。

4.1. 文言文字幕合并

这个节点的作用是通过大模型对文言文散乱的字幕做合并,使得单个分镜控制在10秒以内,使用到了扣子官方的大模型节点,因文章篇幅原因,系统提示词我把它放到了文末。

4.2. 古诗词分镜绘图提示词&视频提示词

这个节点的作用是用来生成分镜的绘图提示词和视频提示词,使用到了扣子官方的大模型节点,受限文章篇幅,系统提示词我放到了文末。

4.3. 古诗词分镜时间线

这个节点的作用是把古诗词分镜视频生成剪映视频轨道上的时间线,使用到了扣子三方插件【视频剪辑工具箱】的【multi_video_timeline】工具。

5. 剪映草稿生成

这部分的内容就是将前面已经生成好的古诗词朗读语音时间线、背景音乐时间线、古诗词字幕时间线等,都添加到剪映的草稿中,使用到了三方插件【视频剪辑工具箱】,所使用到的工具如下:

create_draft:创建剪映草稿

add_audios:添加语音时间线到剪映草稿

add_captions:添加字幕时间线到剪映草稿

add_videos:添加视频时间线到剪映草稿

save_draft:保存草稿,得到可下载的剪映草稿地址

5.1. 结束

draft_url:剪映草稿下载地址

6. 下载剪映草稿

当工作流运行完成后,便可以得到剪映草稿的下载地址,可以通过【视频剪辑小助手】来下载剪映的草稿到本地。

下载完成便可以在剪映中看到完成的轨道时间线了,可以在剪映中把视频直接导出即可。

7. 写到最后

这个工作流应该是第一个尝试生成真人视频的,个人觉得AI生成的真人视频还是挺不错的,上面的视频是用了doubao-seedance-pro生成的,如果是换成Seedance2.0或者是Saro,可能效果会更赞,当然价格也会更贵。

觉得AI古诗词这个赛道还是很有意思的,它是真的让你很方便的把课本中的古诗词给"活过来",让小朋友可以更好的去理解古诗中的情境和意境,以便于可以更好的去学习古诗。

本文的分享就到这里,如果您觉得有收获的话,可以给个一键三连,您的鼓励是吾鳴持续输出的最大动力。

最近实战了一些扣子(Coze)工作流相关的案例,包含小红薯图文生成、爆款视频剪辑、办公提效等扣子案例,内附详细的教程和工作流安装包,感兴趣的朋友可以来个一键三连(必须动作) ,文章评论区评论"扣子案例"领取(这些案例不包含本文分享的案例,如果需要本文分享的案例安装包可以后台私信我)。

相关推荐
Joy T1 天前
【AI Agent入门】从RAG知识库到智能体架构:实质区分Coze、Dify与OpenClaw
人工智能·agent·dify·rag·coze·openclaw
吾鳴3 天前
扣子(Coze)实战:还在花钱买英语卡片?Nano Banana 2 10秒一张场景英语卡片
coze
吾鳴5 天前
OpenClaw实战宝典:看完这100个优秀案例,你也离“成仙”不远了
coze
吾鳴7 天前
扣子(Coze)实战:宝妈情感/育儿/成长赛道漫画图文,一键自动生成
coze
玄魂8 天前
Coze+ VisActor Skill:智能图表,触手可及
ai编程·数据可视化·coze
吾鳴11 天前
扣子(Coze)实战:小白也能变大厨?Nano Banana 2一键制作精美菜谱
coze
FE_C_P小麦15 天前
实测避坑|Coze AI Chat视频生成巨坑!别再被AI夸大宣传割韭菜了
ai编程·coze
Java.慈祥18 天前
My First AI智能体!!!
人工智能·python·ai编程·智能体·coze·coze工作流·agent开发
Java_慈祥18 天前
My First AI智能体!!!
python·agent·coze