智能视频应用系统设计
框架图
如上图,智能音视频应用系统包括3个部分,
- 智能视频监控系统
- 音视频网关
- 智能会议系统。
智能视频监控系统提供视频监控相关功能,智能会议系统提供视频会议功能,通过音视频网关把两个系统桥接在一起。
智能视频监控系统下有3个子系统,分别是视频监控子系统、报警管理子系统、视频AI子系统。
智能会议系统有3个子系统,分别为视频会议子系统、畅连接入子系统、会议AI子系统。
视频监控子系统:
1、视频摄像机接入
支持GB28181,Onvif标准协议摄像机接入,也包括了海康,大华,汉邦,宇视等厂商私有协议接入。
2、视频预览
实时预览摄像机视频,支持客户端协议包括,rtmp,rtsp,rtp+ps, rtp+es,webrtc。通过以上支持协议,客户端可支持web端,CS客户端,移动端等。
3、云台控制
对系统管理的所有摄像机可进行云台控制。
4、录像存储
一般情况下,摄像机都配合NVR接入到系统中,NVR进行定时存储,本系统中也提供了录像存储功能,第三方存储设备通过nfs挂在到服务器中,服务器存储为Mp4文件。第三方或者使用本服务器即可通过http查看录像文件。
5、录像查询
支持查询NVR录像文件,返回NVR存储列表。
6、录像回放
支持协议与视频预览一致。
7、回放控制
支持拖动,快放,慢放等控制功能。
演示地址:https://www.ninghongbao.com/video 项目资料:http://www.ninghongbao.com:8888
演示地址默认用户名,密码分别为:admin admin
联系方式:QQ(408215389) VX(chaigec321) 宁鸿宝
报警管理子系统:
- 支持报警主机接入。
- 支持接收第三方报警输入。
- 支持配置报警联动
- 子系统接收到报警后,下发到第三方或者客户端,并实现报警联动。
- 报警搜索,查询。
- 查看历史报警,包括联动抓拍和联动录像视频等。
视频Ai子系统:
- 该系统需部署在具有GPU服务上,支持服务在云端,GPU在本地方式,节约购买GPU服务成本。
- 提供功能
人脸检测、人脸识别,活体检测、物体检测(车,人),衣着检测,安全帽检测,抽烟检测等。
- 检测源输入
视频子系统视频输入,rtsp,rtmp 视频流输入。
音视频网关
音视频网关是桥接智能会议系统与智能会议系统网关,提供主叫与被叫功能。
通过接口可将智能视频监控系统中的视频源呼叫到智能会议系统中的会议室。
智能视频会议系统也可直接呼叫号码,把智能视频监控系统的视频源拉入会议室中。
视频会议子系统
会议子系统使用MCU架构。
1、接入端
Web端,移动端,pc端,mac端,专业sip视频终端。
2、接入能力
会议系统采用分布式架构,具有同时200+ 方入会。
3、会议功能
支持会议直播,录制功能。
4、会议控制功能
画面控制,音视频控制。拉入会议功能。
畅连接入网关
支持华为手机畅连呼叫视频会议号码,直接以终端方式入会。
会议Ai子系统
接收视频会议直播流,对音视频进行Ai分析,音频录制为会议纪要,并可对会议纪要进行查询等。视频进行人脸分析等,具有自动点名等功能。