1、产品概述
智能感知设备,即AI智能识别系统,基于搭载国产AI芯片的智能主机,接入网络摄像头,实时传输图像和视频数据,通过AI视觉识别技术,实现视频结构化、人脸识别、行为分析、状态监测等功能,可广泛应用于智慧城市、智慧交通、智慧能源、智慧金融、智慧电信、智慧工业等领域。
2、产品组成
智能感知设备由AI智能主机和网络摄像头组成。AI智能主机和网络摄像头搭配灵活,可根据实际需要,组配1路或多路网络摄像头。
2.1 AI智能主机
AI智能主机采用国产AI芯片,具有较为灵活和强劲的深度学习处理器,外设资源丰富,接口齐全。可根据应用场景,设置高达312路1080@25fps视频流采集,最高支持312Tops INT8峰值算力,具有超高算力利用率,支持多种算法自由组合。集成有以太网、Wi-Fi、4G等网络通信外设;RS232、RS485、UART等本地通信接口。HDMI显示屏接口、音频输入输出等交互外设。设有USB Host接口、Type-C调试接口。继电器、指示灯、TF卡、按键等通用外设。可内置目标检测识别、视频检索、智能场景分析等各类AI算法。
表 1 AI智能主机型号表
序号 | 类型 | 描述 |
1 | 支持4K H.264/H.265 30fps 视频编码,和4K H.264/H.265 30fps 视频解码。主机通过网口与外界进行数据的交互,对输入的视频数据进行 AI 运算和编解码。 | |
2 | 支持HDMI视频输入,最高支持4K@30fps 分辨率,支持输出最高 1920*1080@30fps 分辨率。主机通过千兆以太网、BT5.0、双频WIFI6等进行网络通讯,支持802.11 a/b/g/n/ac/ax协议。 | |
3 | 支持GB/T-28181、ONVIF、RTSP多协议接入,支持RTMP推流。支持1080p高清视频智能解析,接口丰富,可通过SNMP、ICMP、VNC、IPP等协议实现接入与管理。 | |
4 | 支持312路硬件解码1080P@25fps,104路硬件编码1080P@25fps,可广泛适配,灵活部署,全面适配主流深度学习框架,工具链SDK成熟易用。 | |
其他 | 根据场景判断应用型号 |
AI智能主机可根据用户实际需要,灵活搭配1路或多路网络摄像头。可接入用户已有的存量摄像头,也可新建网络摄像头设备。在充分利用已有摄像头资源的同时,也将AI视觉技术引入,提高设备的智能分析能力。具体参数如下。
表 2 AI智能主机参数表
功能 | 型号 | 描述 |
AI算力 | INT8 | 最高可达312 TOPS |
视频/图片 编解码能力 | 最优视频解码能力 | H.264 & H.265: 11520fps @1080P |
视频解码分辨率 | 8K / 4K / 1080P / 720P / D1 / CIF | |
最优视频编码能力 | H.264 & H.265: 600fps @1080P | |
视频编码分辨率 | 4K / 1080P / 720P / D1 / CIF | |
最优图片编解码能力 | JPEG: 5760张/秒@1080P | |
AI协处理器 | CPU能力 | 最高可达ARM A53 96核@2.3GHz |
AI内存 | DDR容量 | 最高可达144GB LPDDR4X |
主控处理器 | CPU能力 | 最高可达ARM A53 8核@2.3GHz |
主控内存 | DDR容量 | 最高可达12GB LPDDR4X |
存储 | eMMC | 最高可达416GB |
接口 | 网络接口 | 3x 10/100/1000Mbps自适应网口 |
存储接口 | 可扩展1x 2.5寸SATA硬盘 | |
其他接口 | 1x UART(USB Type C) ,1x Micro SD,1x HDMI,2x USB3.0 | |
电源 | 交流供电 | 1个500W金牌电源,100-240V~, 7-3.5A, 60-50Hz |
工作温度 | 温度范围 | -5°C ~ 45°C |
操作系统 | Linux系统 | Ubuntu / 麒麟 |
深度学习框架 | 主流框架 | PyTorch / ONNX / PaddlePaddle / TensorFlow / Caffe / MXNet / Darknet |
2.2 网络摄像头
网络摄像头采用防水等级较高的IP67,可以做到深度防水防震。两路摄像头可以实现180°无死角监控。
图 1 网络摄像头产品图
网络摄像头可灵活搭配,兼容不同主流视频厂家的设备,以及不同类型的摄像头产品。其中可选配的网络摄像头之一参数如下。
表 3网络摄像头参数表
名称 | 描述 |
传感器类型 | 1/3“ CMOS |
像素 | 200万-500万可选 |
帧率 | 20fps-25fps |
镜头 | 水平170°,垂直93° |
快门 | 1/3s-1/100000s |
日夜转换模式 | ICR红外滤片式 |
照度 | 彩色0.01Lux@(F1.2,AGC ON),0 Lux with IR |
背光补偿 | 支持 |
宽动态范围 | 120dB |
数字降噪 | 3D数字降噪 |
防护等级 | IP67 |
3、产品架构
图 2 产品架构图
4、产品部署
产品可采用两种方式部署:边缘端部署、服务端部署。
边缘端部署是将AI智能主机部署在前端,即部署在室外,与网络摄像头直连。摄像头监测画面直接通过主机AI推理,生成结果数据并将数据实时上传至云端服务器,将告警结果展示在应用层。
图 3 边缘端部署方式
服务端部署是将AI智能主机布设在后端,即部署在室内,服务器一侧。摄像头监测画面先传输至云端服务器,AI主机对云端服务器的图像数据进行AI推理,将告警结果传输至应用层。
图 4 服务端部署方式