大家好,我是程序员X小鹿,前互联网大厂程序员,自由职业2年+,也一名 AIGC 爱好者,持续分享更多前沿的「AI 工具」和「AI副业玩法」,欢迎一起交流~
想象一下,假设老板给你布置了一项任务:
将一大段视频中的高光时刻或者重点部分,剪成一段短视频,你怎么做?
再比如,老板参加了一个访谈,访谈后让你把他说话的部分单独剪辑出来,你怎么做?
把视频 2 倍速全部看一遍,然后一帧一帧剪辑?今天还想下班吗?
如何高效完成,光速下班呢?
今天分享一款 AI 视频剪辑神器,可以一键自动剪辑视频!
像上面的场景,5 分钟就可以搞定。工作效率直接拉满!
而且项目完全开源,支持本地部署,不懂技术不会本地部署的,也可在线直接使用,完全免费!
一、FunClip 如何工作
这个 AI 工具是 FunClip。
FunClip 是一个完全开源、支持本地部署的自动化视频剪辑工具,由阿里达摩院通义实验室推出。
FunClip 利用 AI 技术(阿里巴巴通义语音实验室的开源 FunASR Paraformer 系列模型),准确识别视频中的语音。用户基于识别结果的文字,快速选择需要的文本 / 说话人,裁剪成视频片段。
二、FunClip 如何使用
懂技术的小伙伴,可以看 FunClip 的 Github 进行本地部署。不会本地部署也没有关系,有两个快速体验网址,可以直接使用。
Github地址及两个体验网址,都贴在文末了。
为了考虑大多数用户,所以这里以在线体验网址来演示 FunClip 的使用。
识别
进入网站后,上传视频。(这里直接用官方示例视频演示)
选填:
1、热词:
用户可以指定特定的实体、名称,来增强 FunClip 的识别效果。可以根据自己情况填写。
2、文件输出路径:
可不填,也可根据自己情况填写。
最后点「识别 | ASR」,FunClip 就开始对视频进行语音识别了。
ps:如果是多人对话,需要区分说话人,可以点右侧的识别按钮。
稍等一会,下面会出现识别结果和 SRT 字幕内容:
裁剪
识别好后,点右侧的「根据文本 \ 说话人裁剪」。
从上一步的识别结果中,复制粘贴想保留的文本,多段文本用 ‘#’ 链接。
如果想根据说话人进行裁剪,可以输入说话人,多个说话人同样用 ‘#’ 链接。(建议本地部署使用 FunClip)
最后点「裁剪」就可以等待视频输出了。裁剪完成后,点 ↓ 可以下载视频。
其他配置:
1、位置偏移:
不需要修改。
2、字幕:
FunClip 还可以修改「字幕」大小及颜色,但在体验网址上是不支持的,需要本地部署 FunClip,且安装 imagemagick。
不过如果不想本地部署也可以,下载好视频后,直接用剪映识别添加字幕,也挺方便。
三、FunClip 有什么亮点
- FunClip 集成了阿里巴巴的开源工业级模型 Paraformer-Large,这是目前性能最好的开源中文 ASR 模型之一,可以以集成方式准确预测时间戳。
- FunClip 支持用户自定义设置「热词 | Hotwords」,即指定特定的实体、名称,以增强识别效果。
- FunClip 能自动识别说话人 ID,并剪辑特定说话人的视频片段。
- FunClip 支持多段自由剪辑,自动返回全视频 SRT 字幕和目标段 SRT 字幕。
四、结束语
在使用 FunClip 的过程中也发现一些小问题,比如多人对话中,如果多人的音色相近,FunClip 目前识别地不是很准确。
不过总体来说,相对于人工剪辑视频,FunClip 可以大大提升特定场景下的视频剪辑效率,至少提高 80% 以上。
有需要的朋友快去试试吧~
五、FunClip 相关地址
FunClip Github 项目地址:
https://github.com/modelscope/FunClip
FunClip 快速体验地址:
ModelScope(国内可用):
https://modelscope.cn/studios/iic/funasr_app_clipvideo/summary
HuggingFace(需要外网):
https://huggingface.co/spaces/R1ckShi/FunClip
更多 AI 工具见【AI工具】专栏,持续更新中。
AI 资料都在公众号,回复【资料】领取。
觉得文章有帮助,请帮忙点赞收藏关注一下呦~
我是程序员X小鹿,前互联网大厂程序员,自由职业2年+,也是一名 AIGC 爱好者,欢迎一起交流~