视频人脸检测 opencv简单应用

简介

数据流图

环境安装

1. 安装opencv

2. 安装vlc

3. 安装ffmpeg

测试Camera拉流

测试openCV人脸检测功能

搭建ffmpeg码流转发服务

1. 启动 ffserver转发服务器

2. 将opencv处理后的视频推到ffserver

3. 使用VLC拉流

 

简介

通过rtsp协议拉取前端摄像头码流，通过opencv进行AI处理（如人脸检测），重新生成视频数据，并进行rtsp服务转发，用于其他客户端拉流。

数据流图

 

环境安装

1. 安装opencv

安装opencv-python 详细见https://blog.csdn.net/ksws0292756/article/details/79511170

$ pip install --upgrade pip $ pip install wheel #如果确定已经安装了wheel就不用执行这条指令

$ pip install opencv-python #安装opencv $ pip install opencv-contrib-python #安装opencv的contrib扩展包

2. 安装vlc

sudo add-apt-repository ppa:videolan/master-daily sudo apt-get update sudo apt-get install vlc

3. 安装ffmpeg

sudo add-apt-repository ppa:djcj/hybrid

sudo apt-get update

sudo apt-get install ffmpeg

 

测试Camera拉流

使用VLC测试camera是否正常工作，拉流请求中admin 为账号 s65656645为密码 172.16.1.29为摄像头IP /cam/realmonitor?channel=1&subtype=0 为大华设备的rtsp拉流格式 channel为通道 subtype为主辅码流

$ cvlc "rtsp://admin:s65656645@172.16.1.29/cam/realmonitor?channel=1&subtype=0" # 注意拉刘请求带引号 否则可能解析错误

运行效果如下

 

测试openCV人脸检测功能

使用opencv拉前端摄像头流，做AI处理（如人脸检测），并进行显示，

直接运行python2.7 stream_test.py (代码见附件)

http://note.youdao.com/noteshare?id=53d7f3cf891fa7870e23879f4fc17cca

运行效果如下，按q退出

 

 

搭建ffmpeg码流转发服务

一般码流转发，推流等使用的rtmp协议，但是考虑到现有的监控体系后端设备如NVR后端设备如NVR(网络硬盘录像机)等，

不支持rtmp客户端拉流，因此需要通过rtsp协议进行码流转发。

1. 启动 ffserver转发服务器

sudo vim /etc/ffserver.conf # 修改ffserver配置如下， 见附件

ffserver -f /etc/ffserver.conf

 

2. 将opencv处理后的视频推到ffserver

# opencv的数据输出到ffmpeg

python stream_to_stdout.py | ffmpeg -f rawvideo -pixel_format bgr24 -video_size 1280x720 -framerate 10 -i - http://localhost:8090/feed1.ffm

注意： pixel_format 为opencv输出的图片格式，为bgr24 video_size 为图片大小 framerate 为帧率

 

3. 使用VLC拉流

可以同时拉camera与ffserver的码流，对比查看

命令分别如下

cvlc "rtsp://admin:s65656645@172.16.1.29/cam/realmonitor?channel=1&subtype=0"

cvlc "rtsp://172.16.3.2:8554/test.h264" # 172.16.3.2为ffserver服务器的Ip

运行效果如下 延时大约90秒

 

代码附件链接  http://note.youdao.com/noteshare?id=53d7f3cf891fa7870e23879f4fc17cca