ISP
文章平均质量分 57
ISP调试及算法研究
岁月蹉跎的一杯酒
ISP小粉丝一枚
展开
-
通常环境光照度参照表
通常环境光照度参照表原创 2024-08-06 16:05:07 · 755 阅读 · 0 评论 -
车载CMS摄像头测试基本概括
CMS摄像头原创 2024-07-31 10:03:45 · 369 阅读 · 0 评论 -
记毕业后的第一份工作—深圳摩尔图像科技(Morpho)
再见,Morpho!加油,明天!原创 2023-10-11 15:50:01 · 3090 阅读 · 16 评论 -
人眼视觉现象
1、明视觉和暗视觉位于人眼视网膜中央的锥状细胞既能感光,又能感色,而且锥细胞能够很好地分辨颜色,有较高的空间分辨率,即对细节分辨能力较强,但感光灵敏度低。一般认为环境亮度大于10cd/㎡的情况下,纯粹是锥细胞起作用,看到的景象既有明亮感,又有彩色感,称为明视觉(Photopic Vision)。位于视网膜周边的杆细胞不能分辨颜色,但有较高的亮度分辨率,即对黑白变化敏感,是以牺牲细节分辨为代价的。一般认为,环境亮度小于0.001cd/m³的情况下,锥体细胞不起作用了,由分布广而相对稀疏的杆体细胞起作用,看原创 2022-05-20 17:00:25 · 4661 阅读 · 0 评论 -
视觉生理学基础(人眼结构)
1、人眼结构光作用于视觉器官,使其感受细胞兴奋,其信息经视觉神经系统加工后便产生视觉。通过视觉,人和动物能感知外界物体的大小、明暗、颜色和动静,获得对机体生存具有重要意义的各种信息。至少有80%以上外界信息经视觉获得,视觉是人和动物最重要的感觉。人眼结构如下图所示,主要包括角膜、虹膜、房水、玻璃体、视网膜、视神经。视觉形成过程是:光线—>角膜—>瞳孔—>晶状体(折射光线)—>玻璃体(固定眼球)—>视网膜(形成物象)—>视神经(传...原创 2022-05-19 11:55:37 · 4053 阅读 · 0 评论 -
光源的彩色特性
目录1、光源的色温2、标准光源3、光源的显色性光源的颜色特性有两个方面,一方面人眼直接观察光源时所看到的颜色,可用三刺激值和色温来评价和描述光源的颜色。另一方面时物体在光源照明下所呈现的颜色的真实性,即光源的显色性。1、光源的色温不同光源所发出的光谱功率分布有很大的差异,因此也就会导致光源的色光各不相同。通常将光源的光与黑体的光像比较来描述其光色。所谓黑体即时完全辐射体,又称作普朗克辐射体。它是指在辐射作用下既不...原创 2022-05-18 15:46:44 · 1462 阅读 · 0 评论 -
手机相机中RAW图像的打开和操作(Python)
1、手机拍摄RAW目前智能手机一般都带有专业模式,拍摄并保存RAW图需在专业模式中设置中打开对应照片格式,之后在拍摄画面会出现RAW图字样,如下图所示。之后拍摄会得到两种格式图像,一种压缩JPG格式,一种无损RAW格式。raw格式图像存储大小明显高于jpg图像。2、对相机RAW格式图像进行数据读取(python)后续可以通过数据线将手机拍摄到的RAW图保存到电脑文件下,方便对RAW图像进行处理。第一步:安装和导入Python相关库安装pip install r.原创 2022-04-22 15:29:56 · 10631 阅读 · 0 评论 -
衡量CMOS图像传感器性能优劣指标
1、灵敏度(pixel sensitivity)作用:图像传感器的感光度,灵敏度,单位:mV/lux·s。2、量子效率QE(quantum efficiency)作用:量子效率是描述光电器件(比如CMOS图像传感器)光电转换能力的一个重要参数,它是在某一特定波长(比如520nm)下单位时间内产生的平均光电子数与入射光子数之比。传感器的光电转换效率越高,其感光度就越高,图像能够提供的信息也更多。3、近红外感光度作用:普通相机的拍摄以可见光照明为前提,但在安防应用中,有时需要在近红外领域(N转载 2022-04-15 16:02:15 · 6715 阅读 · 0 评论 -
ISP小谈
目录1、ISP简单介绍2、ISP学习路线3、国内ISP岗位公司4、ISP的未来 (AI ISP)1、ISP简单介绍关于ISP这个领域目前可能知道的人不是很多,但是我觉得1-2年后会有越来越多的人去学习它,并且可以得到可观的收入,它的应用领域主要有手机相机、安防、芯片等行业,他的作用主要是提升原始图像质量,进而服务高端产业领域识别检测等。ISP对于学习数字图像处理的人并不陌生,很多同学觉得自己学习了数字图像处理后找不到好的工作,现在正是绝佳的机会,我们可以去做ISP...原创 2021-10-24 18:25:10 · 5104 阅读 · 13 评论 -
白平衡算法模型(灰度世界、完美反射、自适应自动白平衡)
目录1、灰度世界算法模型2、完美反射模型3、自适应自动白平衡算法该部分的白平衡算法主要是基于一定假设基础上的算法,主要有灰度世界算法模型、完美反射算法模型以及自适应自动白平衡算法模型,该类算法原理比较简单,方便实现,但是当假设不成立的话,方法的效果并不好。1、灰度世界算法模型如果一副图像颜色足够丰富的话,那么在已知经典光源下的R、G、B三通道的均值应该等于相等,等于一个“灰色”值,这个灰色值是已知的,通过统计未知光源下的R、G、B三...原创 2021-09-22 14:09:58 · 4720 阅读 · 2 评论 -
色彩校正(CCM)和伽马校正(Gamma)
目录1、色彩矫正(CCM)2、伽马校正(Gamma)1、色彩矫正(CCM)色彩校正(Color Correction)是指用相同的方法改变图像中的所有像素的颜色值,以得到不同得显示效果。图像采集系统在获得数字图像时,由于一起或环境光照或人为因素的影响,采集的图像往往与原始图像有很大差别。颜色校正可以在一定程度上减少这种差别。利用 RGB 颜色模型可以方便地调整图像的 RGB 分量值,这对校正偏色很有用。色彩校正的基本原理如下:其中, Mij ...原创 2021-09-15 11:27:31 · 18002 阅读 · 1 评论 -
CFA插值基本方法简单介绍
目录1、双线性插值算法2、平滑色调算法3、固定色差的方法4、边缘敏感算法5、基于边缘判断的自适应CFA插值方法1、双线性插值算法利用像素周围点的评价值来估计像素缺失的颜色信息。 这种算法的计算简单,但由于算法过于简单,这种方法会引入十分显著的杂色。 为了获得更好的图像质量,许多 CFA 插值算法都尝试利用相邻像素间相互关系。2、平滑色调算法假设在一个局部区域里,色调,即相邻的红色(或蓝色)和绿色像素的数值之比,基本保持不变。3、固定...原创 2021-09-13 11:54:16 · 3018 阅读 · 0 评论 -
sigmastar—ISP图像调试(CCM)
一、现象白平衡的目的是为了使得图像中白色块和中性色块不发生色偏,但是无法保证图像中其他色块颜色的准确度,特别是红绿蓝三色以及肤色,我们需要保证其颜色正确性。下图是一张色偏图像:经过白平衡矫正后的结果为:对应24色卡如下:经过AWB矫正后的图像与真实颜色存在一定的差异,因此引入了CCM颜色转换矩阵来调试图像彩色块图像效果。简单来说就是通过一个3x3的矩阵系数乘以sensor捕捉到的景物的R,G,B色得到一个接近我们肉眼真实看到的色彩。二、调试步骤与结果sig...原创 2021-09-03 17:58:15 · 8303 阅读 · 2 评论 -
sigmastar—ISP图像调试(AWB矫正)
一、介绍AWB矫正的目的是使得图像中白色块和中性色块的颜色不发生色偏,使得camera具备人眼颜色恒常性的特性。目前大多数的IPC设备中的awb模块主要是利用色温估计的方法,然后基于灰度世界算法进行白平衡矫正。二、现象色偏图像(先前有自带的AWB参数)色偏图像如何进行查看:有一个简单的方法:利用微信截图工具查看上图第一排的RGB值大小,其中RGB值三个越接近越好。上图白色块R、G、B分别为192,210,239,值相差较大说明存在色偏。三、调试步骤(基于一种色温情...原创 2021-09-02 17:18:19 · 5558 阅读 · 1 评论 -
sigmastar—ISP图像调试(OBC矫正)
一、介绍目录一、介绍二、现象三、调试步骤OBC或者说是BLC矫正是我们拿到一款IPC或者手机camera第一步需要解决的问题。PQtool的调整界面如下:由于增益的不同,会导致OB值也会存在一定的差异,所以建议采用随增益变化的值,可以间隔一段ISO,对图像进行一次黑电平的测量(黑电平的原理和方法可以查看前面内容)。二、现象下图是未进行OBC矫正的图像:整体图像偏紫。然后是OBC矫正后的结果:按道理来说随着增益的增大,auto的矫正值会变大,但是差异原创 2021-09-01 16:08:46 · 4387 阅读 · 10 评论 -
Hi3516A网络监控摄像机AWB模块工作原理
Hi3516A网络监控摄像机AWB模块工作原理监控摄像机的AWB模块由硬件的 WB 信息统计模块及AWB 策略控制算法 Fireware 两部分组成。ISP 的 WB 信息统计模块统计图像(R,G,B)三个颜色分量的平均值或比值,具体可提供的统计信息如表所示。其中,分区间支持将图像分成 NM (M 行 N 列)区域,设置 M=15,N=17,图像分辨率为1920x1080。Bayer 域提供图像传感器采集到的原始图像信息,与(R,G,B) 三个颜色通道增益的无关;RGB 域...原创 2021-08-30 11:55:30 · 1521 阅读 · 0 评论 -
ISP调试中的一些问题现象(持续更新)
目录1、迷宫纹现象2、False Color现象3、PFC (Purple Fringing Compensation)紫边1、迷宫纹现象原因:Crosstalk (Green Equal)这主要是lens与sensor搭配性的问题,当光线进入sensor上micro lens的角度太大,容易误接收到应该被邻近pixel接收的讯号,导致Gr、Gb差异变大,因此这现象较容易发生在画面角落,或是光线从某个特殊角度进入时画面出现迷宫纹。调试方法:调整Crosstalk中Thre原创 2021-08-27 17:39:15 · 4930 阅读 · 1 评论 -
ISP—镜头畸变校正
目录1、径向畸变2. 切向畸变3. 畸变模型透镜由于制造精度以及组装工艺的偏差会引入畸变,导致原始图像的失真。镜头的畸变分为径向畸变和切向畸变两类。1、径向畸变顾名思义,径向畸变就是沿着透镜半径方向分布的畸变,产生原因是光线在原理透镜中心的地方比靠近中心的地方更加弯曲,这种畸变在短焦镜头中表现更加明显,径向畸变主要包括桶形畸变和枕形畸变两种。以下分别是枕形和桶形畸变示意图:成像仪光轴中心的畸变为0,沿着...转载 2021-08-26 15:18:00 · 2444 阅读 · 2 评论 -
ISP图像学习的一些资料
1、https://blog.csdn.net/lz0499/article/details/711562912、https://blog.csdn.net/wtzhu_13/category_11144092.html?spm=1001.2014.3001.54823、https://www.zhihu.com/people/he-nan-yiba4、https://www.zhihu.com/people/zhangjiajie043/answers5、https://www.zhihu原创 2021-08-24 14:50:10 · 4328 阅读 · 1 评论 -
CMOS图像传感器局部黑电平矫正方法
这个Smartsens的一篇专利,主要是针对sensor端进行BLC矫正。专利可从知网下载:https://kns.cnki.net/kcms/detail/detail.aspx?dbcode=SCPD&dbname=SCPD2021&filename=CN109348147B&v=po3NGRXjqDejAT9VayzCkOBv%25mmd2BeR8%25mmd2FzDH4yrrw5ggyrE1zIeQyQt%25mmd2F3kc%25mmd2FKTrXr16g.转载 2021-08-12 13:51:46 · 979 阅读 · 0 评论 -
基于色温估计的白平衡算法
目前常用的灰度世界算法、完美反射算法、自适应白平衡算法、色域映射算法以及神经网络算法,这些算法在一般情况下都能够有效实现颜色矫正。其中,包域映射算法和神经网络算法这类基于先验知识基础上的算法模型结果较为精确,但是由于其算法比较复杂,难利用硬件实现,并且样本的完整性难保证。因此在实际应用中主要使用的还是灰度世界算法和自适应白平衡算法模型。简单灰度世界算法是建立在一定假设基础上的,当拍摄纯色背景时,假设不成立,算法调整效果就会出现较大偏差。而标准差亮度加权灰度世界算法虽然能够...原创 2021-08-05 14:42:57 · 3908 阅读 · 2 评论 -
图像模糊类型
根据不同的物理性质,图像模糊大致可以分为大气模糊、散焦模糊和运动模糊三大类。目录1 大气模糊2 散焦模糊3 运动模糊1 大气模糊 大气模糊(Atmospheric Blur)是模糊图像复原技术研究领域提到的相对较少的一种模糊形式。他源于光学湍流和气溶胶造成的小角散射。光学端流是由于大气中的某些属性因随机的时空变化引起的,如温度和密度的光折射的变化 同时,不同大小的化学物质也对不同类型的、不同波长的光波具有不同的散射性。再大气科学中,这种现象通常被称作为气溶胶散射。光...原创 2021-08-04 16:05:59 · 5839 阅读 · 0 评论 -
图像去噪技术
目录1.1图像去噪的基本概念1.2 去噪效果评价标准1.3传统去噪方法(简单介绍)1.4 非局部均值去噪(NLmeans)1.6基于稀疏模型的去噪方法总结噪声的产生是信号在采集、传输以及记录过程中,受到成像设备自身因素和外界环境的影响而产生的。现实中的噪声是随机分布的,事实上,噪声无法完全去除,只能使得重现信号尽可能的接近原始信号,因此,去噪严格意义上只能被称之为降噪。通过去噪可以有效地增大图像信号的信噪比,提高图像质量,更好地体现原始图像所携...原创 2021-08-03 14:53:33 · 8617 阅读 · 1 评论 -
Demosaic功能及现有算法(一)
1、介绍现在CFA插值有很多种,最简单的是双线性插值算法,双线性插值算法利用像素周围点的评价值来估计像素缺失的颜色信息。虽然这种算法的计算幅杂度很低,但由于算法过于简单,这种方法会引入十分显著的杂色。为了获得更好的图像质量,许多 CFA 插值算法都尝试利用相邻像素间相互关系。平滑色调算法假设在一个局部区域里,色调,即相邻的红色(或蓝色)和绿色像素的数值之比,基本保持不变。而另一种固定色差的算法则是基于相邻的红色(或蓝色)和绿色像素的数值之差为一恒定值的假设。为了改...原创 2021-07-30 17:06:48 · 4383 阅读 · 2 评论 -
全景成像技术(1)—概述
一、概述随着图像传感器和数字图像处理技术的快速发展,数字成像设备取得了极大的进步,其应用 也越来越广泛。就图像质量而言,从最开始仅仅只有几十万像素的低分辨率图像,到中期的 720P 、 1 080P 等百万级像素的图像,再到目前的千万级像素的高分辨图像,可以说,数字成像技术取得了跨越式的发展。然而,随着应用的不断扩大以及用户需求的不断提高,传统数字成像设备的缺点也逐渐地暴露出来,其视场较小的缺点开始成为限制其发展的瓶颈 而目前,越来越多的场合都要求获得大视场的图像,...原创 2021-07-21 10:44:32 · 3464 阅读 · 0 评论 -
数字摄影学基础
目录1.1 数码相机的基本原理1.2 图像分辨率1.3 图像信号处理器1.4 压缩与存储1975 年,柯达公司的工程师 Steven J.Sasson 以盒式磁带作为存储介质, 开发出了世界上一款能记录 1 万像素黑白影像的“手持式电子照相机”。这款原型机重约 4kg,记录一张影像的时间约 23s,当时所用的感光器件是 Fairchild 201100 型 CCD 阵列。这台原型机花费了 Steven J. Sasson 一年左右的时间,就是它的出现颠覆了摄影的物理含...原创 2021-07-07 15:13:57 · 788 阅读 · 0 评论 -
自动白平衡技术(AWB)
目录1、白平衡概念2、调节白平衡3、自动白平衡技术3.1基于图像统计的方法3.2基于学习的方法4、总结1、白平衡概念当人们用眼睛观察自然世界时,在不同的光线下,对相同颜色的感觉基本是相同的,比如在早晨旭日初升时,人们看 个白色的物体 感觉它是白的:而人们在夜晚昏暗的灯光下,看到的白色物体,感觉它仍然是白的,这是由于人类从出生到成长的过程中,大脑己经对不同光线下的物体的彩色还原有了适应性,这种现象称为颜色恒常性。不幸的是, CMOS CCD 等感光器...原创 2021-07-19 10:36:15 · 12676 阅读 · 0 评论 -
自动聚焦技术(AF)
目录5.1概述5.2对比度检测自动聚焦5.2.1 聚焦值计算5.2.2 聚焦峰值搜索5.1概述自动聚焦是能使得场景目标在成像系统中准确清晰成像的某种自动调节过程,自动聚焦方式主要可以分为主动聚焦和被动聚焦,其中主动聚焦是依赖某种距离探测方式,如超声和红外测距等,通过测量目标场景和和镜头之间的距离,然后调焦获得对焦准确的位置。被动聚焦则不需要向对焦目标物发射任何能量或信息,仅仅通过利用透入的光线和形成的图像信息进行分析来调节聚焦。被动对焦主要包括相位检测聚焦和对比度检...原创 2021-07-15 15:33:00 · 8258 阅读 · 0 评论 -
全景成像技术(2)—拼接式全景成像技术
目录2.1基于单相机旋转拍摄的全景图像2.2基于多相机拍摄的全景图像2.3投影算法拼接式全景成像主要包含两种方法。一种是采用单个相机,通过旋转拍摄不同方向的场景;另一种是采用多个相机同时拍摄不同方向的场景。2.1基于单相机旋转拍摄的全景图像首先,将相机固定在可水平旋转的支架上,相机的镜头需要位于支架的中心点。转 动相机一周并隔一定角度拍照,拍摄得到一系列的场景图像。其中,驱使相机转动的支架必须十分精...原创 2021-07-22 10:04:03 · 1803 阅读 · 0 评论 -
自动曝光技术(AE)
6.1自动曝光技术介绍自动曝光可以分为亮度获取、亮度分析、曝光调节三个步骤。从实现方式上,自动曝光又可以分为光学方式与电子学方式。光学方式的自动曝光需要使用单独的光照传感器来测量光照度,从而进行场景亮度获取。获取亮度后,再结合图像信息与当前光圈值、曝光时间和感光度值信息进行分析,判断当前曝光参数是否合适。如果不合适则进行曝光调节 曝光调节指调节光圈、曝光时间和感光度这个曝光相关参数。传统的胶片摄像机以及部分数码摄像机采用的就是这种方式 。电子学...原创 2021-07-16 16:14:49 · 4155 阅读 · 1 评论 -
颜色与颜色空间
目录3.1颜色知觉与可见光3.2颜色视觉理论3.3颜色感知特性3.4颜色空间3.5基于彩色滤镜阵列的彩色感知3.1颜色知觉与可见光光源、被观察物体、观察者是形成颜色感觉的三个不可缺少的要素。颜色是光作用于观察者的视觉系统后产生的一系列复杂的生理和心理活动的综合效果。颜色感觉与听觉、味觉、嗅觉一样,都是外界刺激作用到观察者的感觉器官,在大脑中产生的认知。不同波长的可见光辐射刺激视觉系统引起的颜色感受不同。单一波长的光辐射表现为一种颜色,即单色光或者光...原创 2021-07-14 12:07:36 · 1167 阅读 · 1 评论 -
全景成像技术(3)—鱼眼全景成像
鱼眼全景成像是利用超广角镜头来实现全 成像的 种成像技术,这里的超广角镜头通常指的就是鱼眼镜头。1.1鱼眼镜头鱼眼镜头其实是一种焦距极短并且视角接近或等于 180度的超广角镜头,之所以称为"鱼眼镜头",是因为它的镜片结构与真实鱼眼的结构颇为相似。鱼眼镜头具有相当长的景深,有利于表现图像的长景深效果。鱼眼镜头有两种,一种像其他镜头一样,成像充满画面,另一种成像为圆形。1.2成像投影模型普通的光学镜头...原创 2021-07-23 15:37:17 · 2955 阅读 · 0 评论 -
数字传感器件
目录4.1数字传感器件的发展历程4.2数字感光器件的结构4.2.1CCD的结构4.2.2 cmos结构4.3 传感器件的指标4.3.1感光度4.3.2成像质量的衡量指标4.1数字传感器件的发展历程第一个数字感光器件 1969 年在贝尔实验室诞生,是由物理学家维拉 ·博伊尔 (Willard S. Boyl e) 以及乔治 史密斯( George E. Smith) 发明的。另外一款数字感光器件是 CMOS ,英文全拼为 Comp...原创 2021-07-15 10:38:52 · 642 阅读 · 0 评论 -
快门简单介绍
快门速度:表示光线照射图像感应器的时间长短。根据快门结构的不同,其动作及系统也有很大差异。数码单反相机所采用的快门形式为焦平面快门,通过2片具有遮光性的快门帘幕的动作来调节曝光时间。在成像方面,当快门速度提高时,可以将高速运动的被摄体定格于画面,被摄体运动之所以能够定格于画面,是因为在图像感应器曝光时,快门速度比被摄体的运动速度更快。而当快门速度降低时,将产生被摄体抖动。被摄体抖动是因快门速度相对于被摄体的运动速度过低所产生的现象。快门速度在影响被摄体动作的表现形态的同时,还通过控制图像感应器受光时间长短.原创 2021-07-06 18:21:53 · 424 阅读 · 0 评论 -
ISP—去马赛克和颜色空间变换对图像噪声的影响
图像噪声的存在很大程度上会影响图像质量,然而去马赛克和颜色空间转换对噪声的相关性起着主要的影响。camera中的CMOS通过CFA拜尔阵列来采集不同通道的颜色,一般情况下,R:G:B=原创 2021-06-11 17:04:13 · 2633 阅读 · 1 评论 -
自动曝光技术—亮度获取
1、介绍自动曝光技术可以分成三步骤,分别是亮度获取、亮度分析和曝光调节。这一章内容主要介绍一下自动曝光技术中的亮度获取方法。2、自动曝光技术主要分为 光学原创 2021-06-07 15:47:25 · 1140 阅读 · 0 评论 -
SecureCrt快捷键
一、常用快捷键Alt + Enter -- 全屏Alt + B -- 快速打开新的连接 ,联击B还有clone session的功能哦!Alt + 1/2/3/4/5.../9 -- 切换到第1/2/3/4/5.../9个标签Ctrl + A | Alt+A -- 光标移至行首,windows复制功能应用后,使用Alt+ACtrl + E -- 光标移至行末 Ctrl + U -- 清除当前行和缓存的输入,删除光标至行首所有字符Ctrl + K -- 删除当前...原创 2021-06-03 18:14:08 · 800 阅读 · 0 评论 -
ISP的发展和应用
网上下载的PPT,侵权可以联系删!原创 2021-06-02 09:53:25 · 872 阅读 · 0 评论 -
VENC_GetVencStreamProc select failed!
摄像头无法读取数据流!原因查看这条原创 2021-05-28 11:58:57 · 256 阅读 · 1 评论 -
优化 Demosaic 算法
优化 Demosaic 算法传统的 Demosaic 算法对 Bayer pattern 中缺少的分量采用邻域均值或更复杂一些的算法进行填充,这样做会不可避免的引入一些图像瑕疵,尤其是当用户进行 zoom 操作时情况会变得更 糟糕。Pixel 3 使用 Super Res 替代传统 ISP 处理中的 Demosaic 环节,对 Bayer pattern 缺少的像素 分量做插值。Super Res 采用多帧图像的亚像素插值,补齐了 Bayerpattern 的同时,提高了图 像分辨率,可谓一箭双雕。原创 2021-05-25 11:41:36 · 1391 阅读 · 0 评论