低照度摄像技术简介
低照摄像机的概念首先出现在1998年,早期是由外资品牌主导这个市场,2014年国内各大品牌安防企业开始推出自己的“星光级”低照度安防监控摄像产品,发展到2019年,国内市场就呈现百花齐放的状态。
安防行业通常将前端摄像机分为四个等级:
(1)普通级摄像机,照度通常要求大于0.1Lux;
(2)月光级低照度摄像机,照度范围在0.01~0.1 Lux之间;
(3)星光级低照度摄像机,照度范围达到0.001~0.01Lux;
(4)黑光级低照度摄像机,当照度要求低于0.001Lux的时候,便达到所谓的“超星光级”,而我们常说的“黑光级”摄像机,通常要求在0.0005Lux照度下仍然能维持彩色画面。
图1:低照度摄像头的分类和实现路径
提升摄像头的低照度性能,通常从ISP调优、硬件/软件优化和AI算法应用三个方面着手:
1,ISP(Image Signal Processor)图像处理器:主要作用是对前端图像传感器输出的信号做后期处理,处理过程包括线性纠正、噪声去除、坏点去除、内插、白平衡、自动曝光控制等,依赖于ISP技术才能在不同的光学条件下实现较好的现场细节还原,ISP技术在很大程度上决定了摄像机的成像质量。对ISP进行参数调优,包括进行3D降噪、色噪、描边、宽动态、增益、噪声滤波和边缘增强等的处理。
图2:ISP图像优化流程示意图
2,硬件/软件优化:
(1)大光圈:更大的光圈可以提升进光量,例如F1.0大光圈的进光量是F2.0的4倍;
(2)高质量镜头:优质镜头是高质量成像的基础,采用光学玻璃镜头或玻塑混合镜头,结合增透膜技术,镜片组的透光率可以达到99%以上;
(3)大尺寸高灵敏度传感器:大靶面和堆栈式传感器能有效提升感光能力,例如1/1.7吋堆栈式传感器的感光能力相比1/2.7吋普通传感器提升500%;
(4)红外增强:选用带近红外增强技术的传感器,能够捕捉到更明亮的画面;
(5)通过降低视频帧率,延长每帧图像的曝光时间来增大进光量;
(6)图像融合:一颗传感器采集图像亮度信息和物体轮廓,另一颗采集色彩信息,用融合算法将两个图像信息融合,输出更优的图像;
3,AI ISP:是AI技术与ISP的结合,通常包含20-30个算法。
(1)颜色管理:利用深度学习模型进行更精细的颜色管理,根据不同场景,不同光照度下的颜色变化规律,更准确地调整图像颜色;
(2)色彩增强:通过识别图像中的关键区域和细节,对齐进行有针对性的色彩增强,提升图像视觉效果;
(3)光谱重建:从输入的RGB图像中恢复出更丰富的光谱信息,有助于提升图像的色彩准确性和真实性;
(4)通过AI赋能ISP Pipeline中的五大关键模块HDR、3DNR、SR、RLTM和Demosaic,特别是3A、降噪、HDR模块性能;
随着黑光等低照度摄像技术的不断改进和优化,市场应用端逐步成熟,现阶段经济型的摄像头产品也开始应用低照度成像技术,“星光级”低照度摄像机已经从概念变为各厂商的标配产品,而黑光、极光等更加极致的低照度技术成为各厂商的关注焦点。从追求更低的照度环境,到追求更优质的画面,再到追求极致的清晰度和色彩还原度来助力AI智能识别的应用,低照度摄像机的发展一路高歌猛进,下文我们将介绍一下Sigmastar的低照度摄像头解决方案。