python实现视频音频同步

最新推荐文章于 2024-06-28 09:48:33 发布

.叶倾.

最新推荐文章于 2024-06-28 09:48:33 发布

阅读量4.6k

点赞数 1

文章标签： python 音视频 opencv

本文链接：https://blog.csdn.net/qq_46273065/article/details/128120402

版权

原理

视频信息：  帧率(秒/帧)    视频时长= 总帧数/帧率

音频播放流程:
1.使用opencv来播放视频画面(毫秒/张)
2.使用moviepy来进行视频音频提取
3.使用playsound2来进行播放音频

音频同步过程：
1.利用threading开启视频播放的子线程和音频播放的子线程，利用多任务并发操作实现音画一起播放
2.音画时间同步优化
由于当前程序执行的时间和声音是同步的，但是视频却是不同步的，只需要对视频进行控制即可。

sleepTime = zhen/rate - time.time() + startTime
             当前总帧数/帧率 = 视频播放时间
             视频播放时间-当前程序执行时间 + 程序开始读取的时间 =  视频延迟

一. 使用OpenCV + 视频库 + 音频库 + 多线程

获取帧率

import cv2

cap = cv2.VideoCapture("视频.mp4")
# 获取视频基本信息

fps = int(cap.get(cv2.CAP_PROP_FPS))      # 帧率(秒/帧)
cfps = cap.get(cv2.CAP_PROP_FRAME_COUNT)  # 总帧数
# fps = cap.get(5)
print(f"视频帧率 = {fps},视频总帧数 = {cfps}")

音频提取

from moviepy.editor import VideoFileClip

voide = VideoFileClip("视频.mp4")
voide.audio.write_audiofile("视频.mp3")

多线程实现音频,视频同步播放

import cv2
import threading
import time
from playsound2 import playsound

# 先播放一秒，如果当前时间对不上，视频就等一下，等音频跟上再继续播放
def video():
    cap = cv2.VideoCapture("视频.mp4")
    rate = cap.get(5)  # 读取视频帧率
    startTime = time.time()
    while cap.isOpened():
        ret, frame = cap.read()
        if ret:
            zhen = cap.get(1)   # 获取当前帧数
            frame = cv2.resize(frame, (1080, 640))
            cv2.imshow('frame', frame)
            cv2.waitKey(1)  # 等待1毫秒 （1秒=1000毫秒）
            sleepTime = zhen/rate - time.time() + startTime
            if sleepTime > 0:  # 播放时间快了就等一下
                time.sleep(sleepTime)


def music():
    playsound("视频.mp3")


vd = threading.Thread(target=video)
mc = threading.Thread(target=music)
vd.start()
mc.start()

二. 使用flask实现视频播放

1.使用pycharm创建flask项目

2在static文件夹下存放视频.mp4 文件

3.templates文件夹下,创建 movie.html 文件

<!DOCTYPE html>
<html lang="en">
<head>
    <meta charset="UTF-8">
    <title>电影</title>
    <style>
        body{
            background-color: black;
        }
        .box{
            margin: auto;
            width: auto;
            height: auto;
            align-content: center;
            position: absolute;
            top: 50%;
            left: 50%;
            transform: translate(-50%,-50%);
        }

    </style>
</head>
<body>
<div class="box">
    <video src="./static/{{ movie }}" controls="controls" autoplay="autoplay" width="1200px" height="900px" >视频无法播放时显示的内容</video>
    </div>
</body>
</html>

4.app.py文件

from flask import Flask, render_template

app = Flask(__name__)


@app.route('/')
def hello_world():
    return render_template("movie.html", movie="视频.mp4")


if __name__ == '__main__':
    app.run()
    
#   启动该文件即可
将在控制台看见该网址:   http://127.0.0.1:5000  浏览器访问即可

三. 使用Pyside6

1.  使用pyside6创建窗体
2.  使用多媒体组件
3.  利用多媒体组件播放视频和音频即可

核心代码如下

#   注意请先去学习pyqt5

player = QMediaPlayer(self)  # 创建多媒体播放对象(窗口为自己)
audioOutput = QAudioOutput()  # 创建音频播放对象

  
# 视频播放部分 --将开启一个进程进行视频播放
player.setSource(r"{}".format(filename))
player.setVideoOutput(self.ui.videowidget)  # 链接窗体对象
# 音频部分播放 --将开启一个进程进行音频播放
setAudioOutput(self.audioOutput)  # 链接窗体对象
setSource(r"{}".format(filename))  
audioOutput.setVolume(10)  # 音量
player.start()