由于前一段时间一直在搞海思的芯片,所以最近就想对自己在这一块做一个总结一座备份,主要的参考还是海思的文档。
就海思芯片来说,文档确实很多,对于初学者有很大的帮助。所以对于初学者来说,海思文档肯定是第一手的参考资料。
ISP的概述:
海思文档是这样描述的:ISP 通过一系列数字图像处理算法完成对数字图像的效果处理。主要包括 3A、坏点校正、去噪、强光抑制、背光补偿、色彩增强、镜头阴影校正等处理。ISP 包括逻辑部分以及运行在其上的 firmware。
其实对于纯做嵌入式开发 的来说,这个概念确实不好懂,毕竟涉及到太多的光学方面的专业知识和经验,这个还真不是在网上泡个几天就能够搞得定,毕竟光这些概念就把人搞蒙逼了,如果有光电学科背景的话,应该会好很多吧。
ISP的控制结构:
关于这方面呢,海思也给了一个描述,笔者觉得,还是这张图比较管用。
从上图可知,sensor将lens投射到的光信号光电转换后,将Bayer格式的原始图像(RAW)送给isp,ISP经过算法处理,输出RGB空间域的图像给后端的视频采集单元。在这个过程中,ISP 通过运行在其上的 firmware 对 ISP逻辑,lens 和 sensor 进行相应控制,进而完成自动光圈、自动曝光、自动白平衡等功能。其中,firmware 的运转靠视频采集单元的中断驱动。PQ Tools 工具通过网口或者串口完成对 ISP 的在线图像质量调节。
从上面的图图片和描述,可以知道整个ISP分为firmware和isp 处理逻辑,ISP逻辑现将sensor发送过来的Bayer格式的RAW图完成算法处理后,并将统计处当前的图像的实时