视频监控的基础知识

文献《智能视频监控算法及硬件实现研究》的笔记

智能视频监控一般包括以下几个功能组件：运动检测，目标跟踪，目标分类和识别，行为分析。

最常用的运动物体检测方法有相邻顿差法光流法和背景差法。

由多个不同类型的摄像机监控，既扩大了监控视野，有利于解决遮挡问题，也能通过变焦拍到感兴趣的目标细节进行识别，甚至能恢复目标的三维信息。

计算理论层，给出系统各个部分的计算目的。表达与算法层，给出各部分信息的表达和实现各个部分目标的具体算法。硬件层，回答如何用硬件实现以上算法。

文献《移动视频监控系统的研究与实现》的笔记

流媒体技术融合了视频编解码、流媒体传输与控制、计算机网络等多种计算机技术。一个完整的流媒体系统应必须解决如下关键问题：
媒体数据的采集，媒体数据一般是现有的音视频文件,在监控系统中是通过摄像机进行实时采集。
视频编解码，采集的原始媒体数据的数据量非常大,必须经过压缩后才能在网络中传输压缩后的视频数据传输到客户端后必须解码后在终端显示。
媒体数据的传输与控制，服务端把媒体数据通过通用的流媒体协议传输到客户端客户端接受流媒体数据,同时向服务端汇报丢包情况、解码效率等客户端参数,以便服务端实时控制和调整流媒体的传输。
流媒体播放，流媒体数据在终端的播放,其中涉及图像显示、音频播放、音视频同步等各种多媒体技术。

移动视频监控系统中的核心数据流,可以分为四类会话控制数据流、视频数据流、音频数据流和云台控制数据流。

文献《智能视频监控系统目标跟踪与分类算法研究》的笔记

嵌入式智能摄像机作为智能视频监控系统的前端“眼睛”,其图像获取、分析处理和网络通讯能力对整个监控系统起着非常重要的作用。

多模式传感器也是嵌入式摄像机中常常配备的装置,在许多实际系统设计中,嵌入式智能摄像机常常融合音频采集功能,其他如超声波传感器、红外传感器以及数字开关信号等也常常用在嵌入式智能摄像机系统中。

文献《基于ARM的嵌入式网络视频监控系统设计与实现》的笔记

基于用户数据包UDP协议的RTP和RTCP协议，结合起来是针对音视频的传输。

在RTP会话期间，周期性的发送RTCP包，此包包含已发送数据包的数量，丢失数据包的数量的统计资料。可以利用这些信息动态地改变传输速率,甚至改变有效载荷类型。

应用程序把RTP发送给UDP套接字。

会话期间，分RTP和RTCP包含两个套接字和端口。

客户端退出,改变颜色等指令控制指令需要点对点的安全可靠的传输。根据上面的分析采用协议TCP来可靠传输发送控制指令。