树莓派摄像头慢?使用OpenCV做图像处理摄像头图像延迟问题解决方法
很早之前(2018年左右)在做一个当时风靡一时"跳一跳"小游戏的自动运行小工具时(树莓派通过摄像头获取手机屏幕图像,再驱动舵机云台去点击手机屏幕),就有发现树莓派在做图像处理时,OpenCV连续从摄像头获取的图像和实际的画面可能存在比较大的延迟(秒级别以上),但是当时因为对图像帧数基本没有要求,所以使用了一个投机取巧的方法来解决。
cap = cv2.VideoCapture(0)
ret, frame = cap.read()
cap.release()
即每次获取图像后就释放摄像头,下次获取时再打开摄像头,这样就规避啊了连续获取图像的需求,下面是最终运行的效果(项目地址WeChat-JumpGame-Cheat 代码写的很烂,没啥参考价值)
但是最近在做一个自动驾驶小车的项目时同样遇到了摄像头延迟的问题,因为希望获得尽可能高的图像帧率,所以就没有用之前的奇技淫巧来逃避,大致猜想一下,cap.read()操作实际读取的是一个队列结构(先进后出)的数据,最新一帧的数据会放在队列的尾部,cap.read()读取的的是队列的头部;
如果cap.read()的操作频率大于摄像头的帧率,队列的有效长度最多为2,则获取的图像至多有1帧延迟,如果操作频率小于摄像头帧率,队列的有效长度为N,并且随着时间推移,N最终会为队列最大长度;则图像至多有N帧延迟;
有了以上猜想,解决思路有两个,
第一,降低摄像头帧率以满足图像处理的周期
cap.set(cv2.CAP_PROP_FPS,