1.用到的
3516DV300(400万,500万 AI IPC),A7@900MHz,最大接5.0MP sensor时,最大帧率是15fps,3.0MP及以下是30fps
3519AV100(4K AI IPC),2*ARM Cortex A53@1.5GHz
2.ISP模式
ISP:图像信号处理(对前端摄像头所采集的原始图像信号进行处理)
DVR SoC:模拟音视频的数字化,编码压缩与存储
IPC SoC:集成嵌入式处理器(CPU),图像处理(ISP)模块,音视频编码模块,网络接口模块等
模拟摄像机:图像传感器+ISP芯片
网络摄像机:图像传感器+IPC SoC芯片
3.视频输入
Hi3516DV300:
输入:
支持2路输入
支持8/10/12/14 bit RGB Bayer DC时序视频输入
支持BT.601,BT.656,BT.1120视频输入接口
支持MIPI,LVDS/Sub-LVDS,HiSPi接口
兼容多种sensor并行/差分接口电气特性
提供可编程sensor时钟输出
输出:
支持一个BT.656/BT.1120视频输出接口
支持6/8bit串行,16/18/24bit RGB并行LCD输出
支持4Lane Mipi-DSI接口输出
Hi3519AV100:
最大支持5路Sensor串行输入
支持10/12/14 bit Bayer RGB DC 时序视频输入
支持BT.656,BT.1120视频输入
支持MIPI/subLVDS/HiSPI/SLVS-EC多种接口
4.功耗
3516D:900mW
3516A:1100mW
5.SoC用途
媒体业务(Hi3516DV300):音视频数据的采集,处理,压缩,解压缩,显示,播放等模块
智能业务:传统移动检测;神经网络检测
循环神经网络--->生成序列--->处理真实数据序列后--->预测接下来发生什么
让神经网络把自己生成的结果,当作真实世界里产生的数据值,用作输入,就像做梦,虚幻不存在场景,也成为记忆中感知一部分
神经网络--->机械故障诊断(分类)
语音识别,计算机视觉,医学医疗
6.内部流程
视频采集与压缩:
视频压缩编码:大分辨率码流--->本地存储;小分辨率--->通过网络进行手机点播等
视频解压与显示:
视频输出时支持HDMI/MIPI TX/RGB三种输出接口,复用关系,不能同时使用
音频对讲
网络收发部分需要开发者/用户自己实现
7.常见选型
海思 HI3516D+OV4689:2560*1440P(30fps16:9)
安霸 A7L50+OV4689:2304*1296P(30fps16:9)
8.音频
集成Audio codec,支持16bit语音输入输出
支持I2S接口,支持对接外部Audio codec
音频模块(AUDIO):输入,输出,编码,解码
音频输入输出接口SIO--->Audio codec对接--->完成录制和播放
录音--->模拟声音信号转数字信号(声音以模拟给出,通过Audio codec,按一定采样率和采样精度转换为数字信号,Audio codec以I2S时序或PCM时序方式,将数字信号传给SIO,SIO支持多路复用接收模式,MCU用DMAC将SIO接口音频数据保存到内存,完成录音)
回放--->数字--->nvp6134(音频芯片)--->模拟输出(MCU利用DMAC将内存数据传到SIO接口,SIO接口通过I2S时序或PCM时序向Audio codec发送数据,Audio codec完成数字到模拟转换,并输出模拟信号)
9.外围接口
2通道LSADC
2个SDIO3.0接口,其中一个支持SD3.0卡
1个USB 2.0 Host/Device接口
支持RMII模式,支持10/100Mbps,全双工或半双工模式,提供PHY时钟输出
10.工作电压
内核电压0.9V
IO电压3.3V±10%
DDR3(L)/4 SDRAM接口电压1.5(1.35)/1.2V
11.用到的接口
SPI,ETH,USB,CMOS,UART
邮票孔核心板
品牌:荣品
尺寸:45*45*3mm
CPU:双核主频900MHz
内存:1G(512/2G可选)
存储器:eMMC 8G(4/16/32/64可选)
接口:
MIPI DSI:1路最大1280*800 60fps(7寸MIPI屏)
DVP摄像头接口:1路16位并行DVP
MIPI摄像头接口:2路MIPI CSI RAW数据
语音输出:1路左右声道输出,地板外挂10W功放
SDIO:2路SDIO接口,一路TF卡,另一路接WIFI
以太网:一路eMAC PHY接口,默认接100M PHY芯片(以太网10/100M)
电流参数:
11.电源上下电时序
4路core电源中,MEDIA,CPU,DDR同时上电,约10ms后,VDD上电
下电时序:
3.3V先下电,1.35/1.5V晚于3.3V下电,当3.3V掉到POR阈值(2.1V-2.6V)时,触发POR复位,4路CORE开始下电