- 博客(60)
- 收藏
- 关注
原创 [CR]厚云填补_Diffusion Enhancement for CR
云层的存在严重影响了光学遥感图像的质量和有效性。然而,现有的基于深度学习(DL)的云移除(CR)技术,通常以保真度驱动的损失作为约束,例如L1或L2损失,往往产生平滑的结果,往往无法重建视觉上令人愉悦的结果,并导致语义损失。为了应对这一挑战,这项工作建议在数据和方法方面进行增强。在数据端,建立了一个空间分辨率为0.5 m的超分辨率基准CUHK cloud removal (CUHK- CR)。这个基准包含了丰富的细节纹理和不同的云覆盖,作为设计和评估CR模型的坚实基础。
2024-08-27 16:51:51
158
原创 [CR]厚云填补_DDPM-CR
在本文中,我们提出了一种新的去噪扩散概率模型-云去除(DDPM-CR),它可以有效地去除光学图像场景中的薄云和厚云。我们的网络利用去噪扩散概率模型(DDPM)架构整合云光学和辅助SAR图像作为输入提取DDPM特征,为缺失信息检索提供重要信息。此外,我们还提出了一种采用DDPM特征和多尺度注意机制的去云头。为了获得更好的网络性能,我们提出了一种面向云的损失算法,该算法在训练过程中考虑了高低频图像信息以及云区域。
2024-08-21 21:25:43
774
原创 [DL]深度学习_扩散模型
扩散模型运行原理首先sample一个都是噪声的图片向量,这个向量的shape和要生成的图像大小相同。通过Denoise过程来一步一步有规律的滤去噪声。Denoise的次数是事先规定的,给每一个步骤给定编号,最终步骤编号为1。从噪声到图像的过程称为Reverse Process雕像已经在大理石里边了,我只是把不要的部分凿掉。--米开朗基罗将相同的Denoise model反复进行图像去噪过程,但是每一个步骤阶段输入的噪声图像之间差别很大。
2024-08-18 20:28:00
920
原创 [DL]深度学习_针对图像恢复的高效扩散模型DiffIR
扩散模型(DM)通过将图像合成过程建模为去噪网络的顺序应用,实现了SOTA的性能。然而,与图像合成不同的是,图像恢复(IR)对生成符合ground-truth的结果有很强的约束。因此,对于IR,传统的DMs在大型模型上运行大量迭代来估计整个图像或特征映射是低效的。为了解决这个问题,我们提出了一种高效的图像恢复扩散模型 (DiffIR),它由紧凑的图像恢复先验提取网络(Compact IR prior extraction network,CPEN)动态图像恢复Transformer(DIRformer)和。
2024-08-13 16:40:03
746
原创 [CR]厚云填补_GridFormer
恶劣天气条件下的图像恢复是计算机视觉中的一个难点。在本文中,我们提出了一种新的基于变压器的框架GridFormer,它可以作为恶劣天气条件下图像恢复的支柱。GridFormer采用剩余密集变压器块在网格结构中进行设计,并介绍了两种核心设计。首先,它在变压器层使用增强的注意机制。该机制包括采样器和紧凑自关注阶段以提高效率,以及局部增强阶段以加强局部信息。其次,我们引入了一个残余密集变压器块(RDTB)作为最后的GridFormer层。这种设计进一步提高了网络从之前和当前的局部特征中学习有效特征的能力。
2024-08-04 16:46:29
586
原创 [CR]厚云填补_SEGDNet
在过去的二十年里,图像去雾问题在计算机视觉界受到了极大的关注。在雾霾条件下,由于空气中水汽和粉尘颗粒的散射,图像的清晰度严重降低,使得许多计算机视觉系统,如用于物体检测、物体识别、监视、驾驶辅助等的计算机视觉系统难以进行进一步的处理和操作。然而,以往的除雾方法通常存在亮度差、偏色、去除不清洁、光晕、伪影和模糊等缺点。为了解决这些问题,本研究提出了一种新的结构转移边缘增强网格去雾网络(SEGDNet)。采用一种保持边缘的平滑算子—引导滤波器,有效地将图像分解为低频图像结构和高频边缘。
2024-08-03 22:18:40
868
原创 [CR]厚云填补_MSDA-CR
云层污染是光学遥感图像中常见的问题。基于深度学习的遥感图像去云技术近年来受到越来越多的关注。然而,由于缺乏对云失真效果的有效建模和网络较弱的特征表示能力,从云图像中开发有用的多尺度云感知表示仍然具有挑战性。为了规避这些挑战,我们提出了一个多尺度扭曲感知云移除(MSDA-CR)网络,该网络由多个云扭曲感知表示学习(CDARL)模块组合在一个多尺度网格架构中。具体来说,定义云畸变控制函数(CDCFs)并将其纳入CDARL模块中,以自适应地模拟成像过程中云干扰引起的畸变效应,并使用可学习的参数来利用畸变恢复表示。
2024-08-03 20:40:28
833
1
原创 [CR]厚云填补_GridDehazeNet+
雾霾等恶劣天气条件会降低自动驾驶和智能交通系统的性能。作为一种潜在的补救措施,我们提出了一种增强的多尺度网络,称为GridDehazeNet+,用于单幅图像去雾。提出的除雾方法不依赖于大气散射模型(ASM),并解释了为什么不一定执行该模型提供的降维。GridDehazeNet+由预处理、主干和后处理三个模块组成。与手工选择的预处理方法产生的衍生输入相比,可训练的预处理模块可以生成具有更好多样性和更相关特征的学习输入。通过不同尺度的密集连接有效缓解瓶颈问题的新颖网格结构;
2024-08-02 19:57:49
592
原创 [CR]厚云填补_GridDehazeNet
我们提出了一个端到端的可训练卷积神经网络(CNN),命名为GridDehazeNet,用于单幅图像去雾。GridDehazeNet由预处理、主干网络和后处理三个模块组成。与手工选择的预处理方法产生的衍生输入相比,可训练的预处理模块可以生成具有更好多样性和更相关特征的学习输入。该核心模块实现了一种基于注意力的网格网络多尺度估计方法,有效地解决了传统多尺度估计方法存在的瓶颈问题。后处理模块有助于减少最终输出中的伪影。实验结果表明,GridDehazeNet在合成图像和真实图像上的表现都优于最先进的技术。
2024-08-01 17:24:11
693
原创 [CR]厚云填补_Grid Network
本文提出了一种新的卷积神经网络架构GridNet,用于语义分割(全场景标记)。经典神经网络实现为从输入到输出的一个流,并在流中应用下采样算子,以减少特征映射的大小并增加最终预测的接受场。然而,对于语义图像分割,其任务是为图像的每个像素提供语义类,特征映射减少是有害的,因为会导致输出预测中的分辨率损失。为了解决这个问题,GridNet遵循一种网格模式,允许多个相互连接的流以不同的分辨率工作。表明,网格网络推广了许多众所周知的网络,如Conv-deconv,残差网络或U-Net网络。
2024-08-01 17:00:05
1024
原创 [CR]厚云填补_多云条件下土地覆盖分割的多模态多任务学习
地球的大部分表面被云层覆盖,导致光学图像遭受地面信息的严重退化。具有穿透云层能力的合成孔径雷达(SAR)图像可以为光学图像提供补充信息。因此,在多云条件下,光学影像与SAR影像的融合可以显著提高解译精度。在本文中,我们提出利用相关的去云任务对土地覆盖进行精确的多模态语义分割。为此,我们开发了一种端到端的可学习架构,该架构共同解决了云移除和土地覆盖语义分割的任务。云移除任务鼓励学习知识特征,以克服语义模糊的负面影响。实验表明,该算法能有效提高多云条件下的语义分割精度。
2024-07-27 18:23:56
937
原创 [DL]深度学习_知识蒸馏
知识蒸馏网络是一种神经网络模型,用于将复杂模型的知识转移到简化的模型,以提高模型的性能和效率。它借鉴了知识蒸馏方法的思想,通过将复杂模型的知识传递给简化模型来实现模型压缩和加速。知识蒸馏网络的基本原理是通过引入一个教师模型(通常是一个复杂的模型,例如深度神经网络)来指导一个学生模型(通常是一个简化的模型,例如浅层神经网络)的训练。教师模型在训练过程中可以提供额外的信息,例如类别概率分布、中间层特征表示等,以帮助学生模型更好地学习。将知识从教师网络迁移到学生网络中。
2024-07-26 11:33:09
166
原创 [CR]厚云填补_CloudSeg
CloudSeg: A multi-modal learning framework for robust land cover mapping under cloudy conditions
2024-06-29 09:14:46
277
原创 [CR]厚云填补_基于相似像素的渐进式缺口填补方法PGFCTS
在光学遥感图像的预处理中,由于云层较厚或传感器发生故障而产生的空白填充一直是一个重大的挑战。相似像元的概念来源于遥感场景的时空相似性,被广泛接受和应用,导致各种空白填充模型的发展。然而,在具有时空异质性表面和广泛缺失区域的复杂场景中,现有模型通常会产生明显的噪声样伪影、扭曲的光谱特征和不可靠的空间纹理。为了应对这一挑战,提出了一种简单而有效的基于相似像素的方法,称为通过级联时空框架的渐进间隙填充方法。
2024-06-20 17:36:16
521
原创 [CR]厚云填补_综述整理
由于光学图像的局限性,其波段无法穿透云层,图像总会受到云层的污染,导致遮挡区域信息缺失,限制后续的应用。合成孔径雷达SAR能够提供全天候、全天时的地面信息。因此,平移SAR或融合SAR与光学图像获取无云的类光学图像是解决云污染问题的理想方法。在本文中,调查了现有文献,提供了两种分类方法,一种基于输入类型,另一种基于使用方法。同时,分析了使用不同数据作为输入时的优缺点。最后部分讨论了这些现有方法的局限性,提出该领域未来研究的几个可能方向。
2024-06-06 21:27:36
827
原创 [CR]厚云填补_GLF-CR
GLF-CR: SAR-enhanced cloud removal with global–local fusion
2024-05-07 09:58:29
892
原创 [CR]厚云填补_M3R-CR Dataset and Align-CR
去云(Cloud Removal)是遥感领域的一个重要且具有挑战性的问题,近年来在这一领域取得了显著进展。现有数据集的高分辨率图像不可用对生成结构的语义意义缺乏评估本文中介绍了M3R-CR,一个多模态和多分辨率数据融合的高分辨率CR基准数据集。M3R-CR具有全球采样的高分辨率光学观测,与雷达测量和像素级土地覆盖注释相匹配。多分辨率特性所导致的对中误差,以及由于固有成像机制差异等因素导致的高分辨率图像更明显的不对中问题。现有的基于多模态数据融合的方法假设图像对在像素级上精确对齐,因此不适用于该问题。
2024-05-01 11:14:05
1080
原创 摄影测量学_知识点总结
航摄像片上的特殊点线面-摄影方向线。论述题-摄影测量技术的发展趋势。摄影测量基础知识-像主距。摄影测量常用坐标系-五大。航摄像片的内、外方位元素。投影基本知识-中心投影。航摄像片与地形图的区别。共线条件方程-一般形式。
2024-04-19 16:10:40
1844
原创 [SS]语义分割_Mask R-CNN
Mask R-CNN是一种用于物体检测和语义分割任务的深度学习模型。它是在Faster R-CNN的基础上进行改进的,通过增加一个分割分支,实现了物体检测和像素级别的语义分割。Mask R-CNN通过在RPN(Region Proposal Network)的基础上,增加了一个全连接层来生成每个候选框的分类概率和边界框回归信息。同时,它还为每个候选框添加了一个全卷积网络来生成候选框的mask分割。在训练过程中,Mask R-CNN除了进行物体分类和边界框回归的损失计算,还加入了语义分割的损失计算。
2024-03-05 11:03:52
1041
原创 [SS]语义分割_U-Net
U-Net是一种用于生物医学图像分割的卷积神经网络架构。它由Olaf Ronneberger等人在2015年提出,并被广泛应用于医学图像分析领域。U-Net的设计灵感来自于生物医学图像分割任务中常见的数据不平衡问题,即前景(感兴趣区域)与背景之间的像素数量差异很大。为了解决这个问题,U-Net使用了一种称为"U"形结构的编码-解码架构,其中编码器部分用于捕捉图像的上下文信息,而解码器部分用于恢复分辨率和帮助生成准确的分割结果。
2024-03-04 11:34:07
1059
原创 [SS]语义分割_DeepLab
(1)、将backbone更换为ResNet;(2)、引入了新结构ASPP。(1)、分辨率被降低,主要由于下采样步距s>1的层导致;(2)、目标的多尺度问题;(3)、DCNNs的不变性会降低定位精度。针对分辨率被降低的问题,通常将最后几个MaxPool层的步距s设置为1,如果是通过卷积下采样的(ResNet),同样将步距s设置为1,配合使用膨胀卷积。针对目标多尺度的问题,将图像缩放到多个尺度分别通过网络进行推理,最后将多个结果进行融合即可,但是这样做的计算量太大。
2024-02-29 11:27:41
968
原创 [SS]语义分割_膨胀卷积
膨胀卷积(Dilated Convolution),也称为空洞卷积(Atrous Convolution),是一种在卷积神经网络中常用的操作。它通过在卷积核的周围插入一定数量的零值来改变卷积核的感受野大小。传统的卷积操作是在输入特征图上滑动卷积核,每次将卷积核中的权重与输入特征图的对应位置进行相乘并求和,从而得到输出特征图中的一个像素值。膨胀卷积则是在滑动卷积核时,通过在卷积核的元素之间插入一定数量的零值来扩大感受野,使得每个卷积核的有效感受野增大。
2024-02-28 11:20:08
959
原创 [SS]语义分割_FCN全卷积网络
全卷积网络(Fully Convolutional Networks,FCN)是一种用于语义分割的深度学习网络模型。传统的卷积神经网络(CNN)常用于图像分类任务,但是对于像素级别的语义分割任务,需要输出每个像素的类别标签,CNN的全连接层并不能处理不同输入尺寸的图像,因此不能直接用于语义分割。FCN通过将全连接层替换为全卷积层,实现了端到端的像素级别的语义分割。FCN的网络结构由编码器和解码器组成。
2024-01-20 20:04:40
1026
原创 [SS]语义分割_文献摘要
本文基于Sentinel-2时间序列遥感影像,使用DeepLabv3+深度学习语义分割模型生成了济南市中心城区2016年-2020年逐年防尘绿网数据,随后利用景观格局、重心-标准差椭圆等方法分析了其空间分布特征和时空扩张趋势。
2024-01-18 21:23:50
919
原创 [SS]语义分割_转置卷积
转置卷积(Transposed Convolution),也被称为反卷积(Deconvolution)或逆卷积(Inverse Convolution),是一种卷积神经网络中常用的操作。转置卷积可以用于图像生成、图像分割、语义分割等任务中。转置卷积的操作实际上是卷积操作的逆过程。在标准的卷积操作中,输入数据经过卷积核的滑动窗口运算,生成输出特征图。而在转置卷积中,输出特征图经过转置卷积核的滑动窗口运算,生成输入数据的近似重构。转置卷积的操作可以用矩阵乘法的方式来实现,也可以用卷积的方式来实现。
2024-01-18 10:35:22
462
原创 [SS]语义分割——基础知识
语义分割(Semantic Segmentation)是计算机视觉中的一项任务,目标是将图像中的每个像素按其语义类别进行分类。与传统的目标检测不同,语义分割对图像中的每个像素都进行分类,而不是只关注物体的边界框。语义分割的目标是给图像中的每个像素分配一个类别标签,通常使用颜色编码来可视化不同的类别。例如,将图像中的道路像素标记为蓝色,建筑物像素标记为红色等。语义分割在许多计算机视觉任务中起到重要作用,如自动驾驶、智能监控、图像编辑等。
2024-01-17 17:42:13
1048
原创 遥感类SCI期刊_一区二区汇总
h-index:191区h-index:2381区h-index:1101区h-index:2161区h-index:761区h-index:342区h-index:02区h-index:02区h-index:812区h-index:802区h-index:642区h-index:371区h-index:01区。
2024-01-14 11:15:30
2684
原创 [DL]深度学习_Feature Pyramid Network
Feature Pyramid Network (FPN)是一种用于目标检测和语义分割的神经网络架构。它的目标是解决在处理不同尺度的图像时,信息丢失和语义细节模糊的问题。FPN的核心思想是通过在网络中添加一组横向连接来构建多尺度特征金字塔。这些横向连接将底层的高分辨率特征与高层的低分辨率特征进行融合,以捕捉不同尺度的语义信息。融合后的特征金字塔可用于检测和分割任务中的多尺度目标识别。具体来说,FPN在主干网络(如ResNet)中的每个阶段添加一个横向连接,以便从高层到底层传递信息。
2024-01-13 17:31:21
1605
原创 遥感图像分类与识别_知识点总结
遥感图像分类以遥感数字图像为研究对象,在计算机系统的支持下,综合运用地学分析、遥感图像处理、地理信息系统、模式识别与人工智能等技术,实现地学专题信息的智能化获取。其基本目标是将人工目视解译遥感图像发展为计算机支持下的遥感图像理解。
2023-12-28 21:02:27
1813
1
原创 [DL]深度学习_AlexNet
AlexNet是一种经典的卷积神经网络模型,由Alex Krizhevsky、Ilya Sutskever和Geoffrey E. Hinton于2012年提出。它是第一个在ImageNet比赛中获得冠军的深度神经网络模型,引领了深度学习在计算机视觉领域的发展。AlexNet的结构包含了8个图层,其中前5个是卷积层,后3个是全连接层。下面是对每个图层的详细介绍:输入层(Input Layer):接受输入的图像,并进行预处理。
2023-12-26 11:30:52
953
原创 [DL]深度学习_ResNet
在神经网络中,"degradation"(退化)指的是当网络的深度增加时,性能反而下降的现象。具体来说,随着网络层数的增加,训练误差会逐渐减小,但验证误差却会先减小后增大,导致模型的性能退化。网络退化问题的原因有以下几点:梯度消失(Gradient Vanishing):在深层网络中,反向传播算法可能会导致梯度逐渐变小,使得参数更新很小或无法更新,从而降低网络的学习能力。
2023-12-19 21:40:51
910
原创 [DL]深度学习_CNN卷积神经网络
在深度学习中,卷积是一种特殊的数学运算,它被广泛应用于卷积神经网络(Convolutional Neural Networks,CNNs)中。在卷积神经网络中,卷积主要是指对于输入张量(通常是图像或时间序列数据)的一种特殊的线性变换。卷积的定义在深度学习中稍有不同,具体来说,在卷积神经网络中,卷积操作是通过将一个可训练的小型过滤器(也称为卷积核或滤波器)应用于输入张量的不同位置来计算输出张量的过程。这个过滤器被滑动到输入张量的每个位置,并且在每个位置进行点乘和求和来计算一个输出值。
2023-12-12 17:36:36
1325
原创 [DL]深度学习_神经网络
神经网络前向传播(Feedforward Propagation)是指将输入数据在神经网络中进行计算的过程。在神经网络的每一层中,通过激活函数对输入进行转换,再将转换后的结果传递到下一层,直到达到输出层。在前向传播的过程中,每一层的权重和偏置都会被使用。整个前向传播的过程是一个单向的计算过程,没有反馈回来的信息。在每一层中,将输入数据乘上对应层的权重矩阵,再加上偏置向量。将该层的输出传递到下一层,重复步骤2-3,直到达到输出层。对每一层的结果使用激活函数进行转换,得到该层的输出。
2023-12-11 20:03:21
1890
原创 [DL]深度学习_基础
深度学习(Deep Learning)源于神经网络领域,是一种基于多层神经网络的机器学习方法。相较于传统的浅层神经网络,深度学习模型具有更高的神经网络层数,因此能够处理更为复杂的数据,包括图像、语音、自然语言等。深度学习的基本构建模块是神经网络,其基本思想是将大量数据输入到神经网络中进行训练,通过不断调整神经元之间的连接权重,学习到数据中的特征,然后用这些学习到的特征来进行预测和分类。神经网络中的每一个神经元都拥有权重和偏置,权重确定了神经元之间的连接强度,偏置则是用于调整神经元的输出值。
2023-12-08 11:15:58
737
原创 [ML]机器学习_强化学习
强化学习是一种从环境与智能体的交互中进行学习的机器学习方法。它的主要目标是通过智能体进行实验来获得关于环境和任务的信息,最终达到最优的决策策略。 在强化学习中,人们通常将环境描述为一系列状态和动作的集合。智能体的任务是选择一系列动作来改变环境的状态,并最大化长期的回报(通常用累计奖励的期望来表示)。智能体的决策策略通常基于学习算法得出并随时间推进而发生调整。 在强化学习中,有两种基本的方法:基于值函数的方法和基于策略的方法。 基于值函数的方法,比如Q-learning,通过学习环
2023-12-08 10:48:14
352
原创 [ML]机器学习_PCA主成分分析
主成分分析(PCA)是一种算法,可以获取大量特征的数据,并将特征数量减少到两三个特征(即二维或三维),以便对特征进行可视化绘图。如果有关于轿车集合的数据,轿车有许多的特征,如汽车长度,宽度,高度等。借助PCA减少特征数量以便将其特征可视化。1、假设特征是汽车的长度,是汽车的宽度,由于事实情况限制,汽车的宽度往往变化不会太大,如果有一个汽车集合中是汽车长度和宽度的数据集,则数据特征分布会如下图所示。其中特征车长变化很大,而特征车宽则变化相对较小。如果需要减少特征,则可以做的是取特征车长。
2023-12-07 17:31:12
923
原创 [ML]机器学习_基于内容过滤的深度学习算法
基于内容过滤的深度学习算法是一种利用深度学习技术实现的推荐算法。它的主要思想是利用用户过去的行为和偏好以及物品的内容特征,通过深度学习模型来预测用户对物品的兴趣度,并向用户推荐可能感兴趣的物品。具体来说,基于内容过滤的深度学习算法一般分为以下几个步骤:特征提取:首先需要对物品的内容进行特征提取。这一步通常是使用卷积神经网络(CNN)或循环神经网络(RNN)等深度学习模型提取物品的视觉、文本、音频或其他内容特征。特征表示:将提取出的物品特征表示为向量形式。
2023-12-05 20:35:50
983
原创 [ML]机器学习_协同过滤算法
协同过滤算法是一种推荐算法,其目的是为用户推荐他们可能感兴趣的物品。该算法使用用户的历史行为和偏好来预测他们对尚未查看或评分的物品的偏好。协同过滤算法有两种类型:基于用户和基于物品。基于用户的协同过滤算法根据用户之间的相似度来推荐物品。它首先计算用户之间的相似度,并根据这些相似度为每个用户推荐适合他们的物品。基于物品的协同过滤算法是相反的,它根据物品之间的相似度来推荐物品。协同过滤算法分为两种主要类型:基于用户的协同过滤和基于物品的协同过滤。
2023-11-26 19:28:12
1015
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人