❤️ 如果你也关注 AI 的发展现状,且对 AI 应用开发感兴趣,我会每日分享大模型与 AI 领域的开源项目和应用,提供运行实例和实用教程,帮助你快速上手AI技术!
🥦 AI 在线答疑 -> 智能检索历史文章和开源项目 -> 尽在微信公众号 -> 搜一搜:蚝油菜花 🥦
🎧 “视频创作者福音!开源AI字幕生成工具,一键批量生成+翻译字幕,提升内容传播效率!”
大家好,我是蚝油菜花。你是否也遇到过——
- 👉 视频制作完成后,手动添加字幕耗时耗力
- 👉 需要将字幕翻译成多种语言,但翻译工具不够便捷
- 👉 想要批量处理多个视频文件,但缺乏高效的工具
今天介绍的 video-subtitle-master,正是为解决这些问题而生!这款开源工具基于 whisper.cpp 和 fluent-ffmpeg,支持批量生成字幕并翻译成多种语言,操作简单,性能优化,还能:
- ✅ 批量喂入100+视频:自动生成精准时间轴字幕
- ✅ AI翻译12国语言:直接调用百度/火山/DeepLX翻译API
- ✅ 苹果芯片加速:M1/M2处理速度比传统工具快3倍
接下来,这里将详细介绍它的功能和技术原理。
🚀 快速阅读
video-subtitle-master 是一款开源AI字幕生成工具,支持批量处理视频和音频文件。
- 核心功能:支持批量生成字幕、翻译字幕、自定义字幕格式和并发任务数量。
- 技术原理:基于 whisper.cpp 进行语音识别,集成多种翻译服务,提供图形用户界面和高效的后端处理。
video-subtitle-master 是什么
video-subtitle-master 是一款基于开源项目 VideoSubtitleGenerator 开发的工具,能够批量为视频或音频生成字幕,并支持将字幕翻译成其他语言。它具备图形用户界面,操作便捷,适合普通用户和开发人员使用。
video-subtitle-master 集成了 whisper.cpp 和 fluent-ffmpeg,优化了性能,支持多种翻译服务,如百度翻译、火山引擎翻译、DeepLX 等。用户还可以自定义字幕文件名、翻译内容格式和并发任务数量,满足不同场景的需求。
video-subtitle-master 的主要功能
- 批量处理:支持批量为视频或音频生成字幕,并支持批量翻译字幕文件。
- 字幕翻译:支持将生成的字幕或导入的字幕翻译成其他语言,集成多种翻译服务,包括百度翻译、火山引擎翻译、DeepLX、Ollama 本地模型、OpenAI 风格 API 等。
- 优化与集成:集成 whisper.cpp,对 Apple Silicon 进行了优化,提高生成速度;集成 fluent-ffmpeg,无需单独安装 ffmpeg。
- 自定义功能:支持自定义字幕文件名、翻译后的字幕文件内容、模型下载源和并发任务数量。
video-subtitle-master 的技术原理
- 语音识别技术:使用 whisper.cpp 或其他语音识别引擎从音频中提取文本内容。whisper.cpp 是基于深度学习的语音识别模型,能高效地将语音转换为文字。
- 字幕生成:基于语音识别引擎生成的文本内容,按照时间戳格式化为字幕文件(如 SRT 或 ASS 格式)。
- 翻译服务集成:支持多种翻译服务,基于调用外部 API(如百度翻译、火山引擎翻译)或本地模型(如 Ollama)将字幕翻译成目标语言。
- 图形用户界面(GUI):使用现代前端技术(如 Electron)开发,提供直观的用户界面,方便用户操作。
- 后端处理:使用 Node.js 和后端技术处理文件读取、模型加载、任务调度等逻辑。
如何运行 video-subtitle-master
快速启动!
- 前往
release
页面根据自己的操作系统下载安装包。
- 安装并运行程序。
- 在程序中配置所需的翻译服务。
- 选择要处理的视频文件或字幕文件。
- 设置相关参数(如源语言、目标语言、模型等)。
- 开始处理任务。
源代码部署
1. 克隆本项目到本地
git clone https://github.com/buxuku/video-subtitle-master.git
2. 安装依赖
cd video-subtitle-master
yarn install
3. 启动项目
yarn start
手动下载和导入模型
- 国内镜像源:https://hf-mirror.com/ggerganov/whisper.cpp/tree/main
- Hugging Face 官方源:https://huggingface.co/ggerganov/whisper.cpp/tree/main
导入步骤:
- 在"模型管理"页面中,点击"导入模型"按钮。
- 在弹出的文件选择器中,选择您下载的模型文件。
- 确认导入后,模型将被添加到您的已安装模型列表中。
资源
❤️ 如果你也关注 AI 的发展现状,且对 AI 应用开发感兴趣,我会每日分享大模型与 AI 领域的开源项目和应用,提供运行实例和实用教程,帮助你快速上手AI技术!
🥦 AI 在线答疑 -> 智能检索历史文章和开源项目 -> 尽在微信公众号 -> 搜一搜:蚝油菜花 🥦