太逼真!豆包 · 播客模型来了:一句话生成「苏超联赛」播客,很懂 13 太保的梗

家人们,又有好玩儿的 AI 出现了------

火山引擎 发布豆包 · 播客模型!

来来来,我们直接听一段:

如何?是不是有亿点点被惊艳到了?

两个 AI 的对话不论是语气、停顿、口语化,简直跟真人没有差别。

男生 AI 在讲解故事的过程中,女生 AI 会时不时穿插 "嗯"、"没错"、"对" 这样的词儿来应和。

我们甚至拿着这个 demo 问了一圈身边的人,他们竟然清一色没有发觉这是 AI!

豆包 · 播客模型背后的技术,是基于端到端的实时语音交互模型进行的场景拓展,具备强大的文本理解与高表现力语音生成能力。

为了营造出逼真的双人对谈感觉,团队对大量播客内容进行了细致的体验拆解,分析真人对话的节奏、自然度、信息密度以及口语化表现等维度,并找了专业的播客内容创作者进行充分碰撞和优化,在后续数据生产、模型效果、评测标准上进行了细致打磨。

在端到端语音交互模型的预训练环节,字节跳动语音技术团队还添加了大量语音跟文本充分对齐的数据,让模型学习到正常人交互的模式以及在播客题材下应采用的语音播报形式。

在 SFT(Supervised Fine - Tuning)阶段,团队基于数据生产层面进行精细的内容微调,针对想要的风格进行上层调整。通过大量细致的标注,使模型能够理解如何让整个听感更像真人,从而在播客场景下激发出具体效果。

除此之外,豆包 · 声音复刻模型方面也进行了框架的升级。

以往行业内的复刻模型虽能通过少量 Prompt 输入复刻用户声音,但只能学到 "形",难以学到 "神"。

豆包 · 声音复刻模型不仅能复刻音色,还能根据对话上下文给予更加动态的回复,在情绪层面进行匹配,甚至能够让复刻声音实现原本发音人不能实现的能力,如唱歌、唱 Rap 等,使声音更加拟人、灵动。

据了解,豆包 · 实时语音模型即将在马上到来的火山引擎 Force 大会中全量上线;更多播客的玩法也会陆续在豆包 PC 版中上线。

总而言之,火山引擎在 AI 语音上的发力,尤其是豆包 · 播客模型,不仅仅是增添了 AI 新玩法,更是可以更高效、更个性化的通过 "听" 获取信息,同时把音频创作这件事的门槛再次打了下去。

One More Thing:

最后,我们还将这篇文章 "投喂" 给了豆包 · 播客模型,让它自己对自己做了一期播客。

来听一下效果吧~

扣子空间的体验地址放下面了,目前豆包 PC 端也能体验 "网页播客" 的功能,感兴趣的小伙伴快去感受一下吧~

扣子空间地址:

space.coze.cn

欢迎在评论区留下你的想法!

--- ---

相关推荐
Elecat5 小时前
25年6月 Figma MCP Server + Cursor踩坑记录
ai编程·cursor·mcp
量子位6 小时前
消失的 Ilya 现身毕业演讲:AI 时代如何生存,这是我的法则
ai编程
今天又欠一行代码7 小时前
Trae 更智能的编写vue代码
ai编程
豆包AI编程9 小时前
👾 豆包脑洞研究所| 创意应用有奖征集活动说明
ai编程
拾回程序猿的圈圈∞11 小时前
实战二:开发网页端界面完成黑白视频转为彩色视频
python·ai编程
星尘洞见12 小时前
我把Cursor"骂"成了编程导师:一个让AI好用100倍的"反向驯化"技巧
ai编程
国家不保护废物12 小时前
🧩 React 组件化进阶:像乐高大师一样搭建你的应用世界!
前端·react.js·ai编程
TimelessHaze12 小时前
从"切图崽"到前端工程师:React 到底是个啥?🚀
前端·react.js·ai编程
日升13 小时前
AI 组件库-MateChat 快速起步与核心概念
前端·ai编程·trae