视频链接处理 + 提取字幕

视频链接处理 + 提取字幕

背景

有一些需要处理的视频,想把他们的字幕提取出来,得到完整的内容,进行参考。

技术数据处理说明

Excel(视频链接) -> 下载(先提取字幕,不行则下载音频) -> 转写(使用Whisper-音频转文字模型,得到内容)

核心组件

  1. yt-dlp ------ 万能视频下载器

    • 是 youtube-dl 的活跃 fork,支持 1700+ 站点(B站、抖音、小红书、油管...)
    • 命令行原理:访问页面 → 解析平台特定的 JSON 接口 → 拿到真实媒体 URL → 下载
    • 关键参数:
      --write-subs / --write-auto-subs:抓平台已有的字幕(最省事)
      -x --audio-format mp3:只要音频,不要视频(更小更快)
      --cookies-from-browser chrome:带浏览器登录态,绕过登录墙
      --sleep-requests / --sleep-interval:降低请求频率,反风控
  2. FFmpeg ------ 多媒体瑞士军刀

    yt-dlp 底层依赖它做转码、抽音轨

    视频→音频抽取、格式转换都是它干的

  3. Whisper / faster-whisper ------ OpenAI 开源的 ASR 模型

    ASR = Automatic Speech Recognition(自动语音识别)

    原理简化版:Encoder-Decoder Transformer

    音频 → 切成 30 秒片段 → 转 mel-spectrogram(频谱图) → Encoder 编码

    Decoder 像写作文一样逐词预测下一个 token,输出文字 + 时间戳

    faster-whisper 用 CTranslate2 做推理优化,比官方版快 4 倍、显存少

    模型尺寸:tiny / base / small / medium / large-v3,越大越准但越慢

    中文场景一般用 base(够用)或 medium(更准)

  4. SRT 字幕格式

    就是这种东西:

    复制代码
    00:00:01,200 --> 00:00:03,500
    你好世界

    序号 + 时间戳 + 文字。要变"纯文本"只需正则去掉前两行再合并即可。

注意点

  1. 仅供学习交流使用。
  2. 优先官方字幕优先,质量高,不出错
  3. 注意串行处理,或者有多个账号来回切换,防止被封控
  4. 有些视频网站需要登陆,如:某站、某书,--cookies-from-browser 直接复用浏览器 里的 Cookie
  5. 使用Whisper处理时,由于是跑模型,GPU/CPU密集型,串行即可。
相关推荐
启雀AI11 小时前
AI 驱动的视频课程自动摘要与知识点提取:ASR + LLM 流水线工程实践
人工智能·阿里云·华为云·音视频·培训saas平台
FinelyYang13 小时前
基于 LiveKit 实现一对一视频通话:从信令到媒体进房的完整实践
音视频·媒体
程序员老陆19 小时前
M3U8(HLS 索引协议)深度详解:它不存一帧画面,却指挥了整个互联网视频
音视频·hls·m3u8
雪的季节20 小时前
音视频(51-52)
音视频
hz5678920 小时前
视频会议终端品牌如何选择?主流产品特点与选型标准
安全·音视频·实时音视频·信息与通信
NutShell Wang1 天前
国产全模态开源潮:从语言模型到视频模型,中国开源生态再升级
人工智能·语言模型·开源·大模型·音视频·多模态·vibe coding
民乐团扒谱机1 天前
【读论文】复调音乐信号的主旋律提取:方法、应用与挑战
开发语言·人工智能·算法·音视频·音乐
byte轻骑兵1 天前
【AVDTP】规范精讲[8-3]: 流配置核心三步:从参数下发到动态重配置全拆解
音视频·avrcp·蓝牙耳机·蓝牙车机·蓝牙音频控制
微帧Visionular1 天前
GenOpt像素智绘引擎|AI生成视频需要怎样的视觉优化算法?
人工智能·aigc·音视频
杀生丸学AI2 天前
【世界模型】MotionForesight:视频模型应用于未来的三维场景流预测
音视频