【开源项目】自动字幕生成和字幕翻译

文章目录

  • [1. 安装ffmpeg](#1. 安装ffmpeg)
  • [2. 克隆项目](#2. 克隆项目)
  • [3. 配置项目运行环境](#3. 配置项目运行环境)
  • [4. 填写配置文件](#4. 填写配置文件)
  • [5. 运行项目(仅使用CPU)](#5. 运行项目(仅使用CPU))

项目地址:Github - qinL-cdy/auto_ai_subtitle

项目原理:使用ffmpeg提取视频的音频,使用whisper将音频转写为字幕,使用translate将源语言字幕翻译成目标语言字幕。

说明:translate API免费1000行(行宽70字符),超出需要付费购买API

1. 安装ffmpeg

  • 下载构建好的ffmpeg。Windows版本下载

  • 用7-zip解压文件,将解压目录下的bin目录对应的路径添加到环境变量

    • 在搜索框中搜索环境变量 > 编辑系统环境变量 > 环境变量 > 系统变量 > Path
    • 将bin目录对应的路径添加到Path中
  • win + R启动运行,输入cmd,在命令提示符中输入以下命令,出现下图所示内容即配置成功。

    bash 复制代码
    ffmpeg -version

2. 克隆项目

  • 打开VSCode,点击Clone Git Repository ...。选择克隆的目标文件夹,克隆完成后打开文件夹。

3. 配置项目运行环境

  • 使用conda创建虚拟环境(安装Anaconda、conda换源、pip换源可以去搜索)

    • 启动Anaconda Prompt
    • 输入以下命令创建虚拟环境
    bash 复制代码
    conda create -n auto_ai_subtitle python=3.9 -y
    • 激活虚拟环境
    bash 复制代码
    	conda activate auto_ai_subtitle
  • VSCode选择虚拟环境

  • 右键main.py,点击打开集成终端,输入以下命令安装第三方库。

bash 复制代码
pip install -r requirements.txt

4. 填写配置文件

打开config.yaml,可以根据自己的实际情况设置相应的参数。

  • 语言简称参照链接后两位字母转小写。
  • 路径中不能有中文

5. 运行项目(仅使用CPU)

  • 修改script/audio_tool.py为以下内容:
python 复制代码
import ffmpeg
import subprocess

def audio_extract(input, output):
	ffmpeg.input(input, vn=None).output(output).run()

# 解决中文路径ffmpeg无法运行的问题
# def audio_extract(input_path, output_path):
# 	command = [
# 		'ffmpeg', 
# 		'-i', 'pipe:0',  # 从stdin读取输入
# 		'-vn',          # 仅提取音频
# 		output_path     # 输出文件路径
# 	]

# 	with open(input_path, 'rb') as f:
# 		subprocess.run(command, input=f.read())
  • 修改script/whisper_tool.py,添加verbose=True能显示转写过程。

  • 在集成终端输入以下命令:

bash 复制代码
python main.py
  • 运行过程中出现以下警告可以忽略,因为默认使用FP16,但是CPU不支持FP16,程序自动会改成FP32。
相关推荐
weixin_4462608534 分钟前
LocalAI:一个免费开源的AI替代方案,让创意更自由!
人工智能·开源
jonyleek36 分钟前
独立租户,统一底座:基于Vue3打造的JVS开源多租户框架设计与实现
低代码·前端框架·开源·vue·软件开发·轻应用
TG:@yunlaoda360 云老大4 小时前
腾讯WAIC发布“1+3+N”AI全景图:混元3D世界模型开源,具身智能平台Tairos亮相
人工智能·3d·开源·腾讯云
草梅友仁7 小时前
草梅 Auth 1.11.0 发布与 GitHub 依赖安全更新 | 2025 年第 45 周草梅周报
开源·github·ai编程
Lucky小小吴8 小时前
开源项目5——Go版本快速管理工具
开发语言·golang·开源
升鲜宝供应链及收银系统源代码服务9 小时前
升鲜宝生鲜配送供应链管理系统---PMS--商品品牌多语言存储与 Redis 缓存同步实现
java·开发语言·数据库·redis·缓存·开源·供应链系统
LinXunFeng10 小时前
Flutter 拖拉对比组件,换装图片前后对比必备
前端·flutter·开源
淘源码d14 小时前
什么是医院随访系统?成熟在用的智慧随访系统源码
java·spring boot·后端·开源·源码·随访系统·随访系统框架
Tigshop开源商城系统18 小时前
Tigshop 开源商城系统 php v5.1.9.1版本正式发布
java·大数据·开源·php·开源软件
博士僧小星1 天前
环境配置|GPUStack——为大模型而生的开源GPU集群管理器
开源·大模型·gpu·gpustack