2019 - ICCV - 图像修复 Image Inpainting 论文导读《StructureFlow: Image Inpainting via Structure-aware ~~》

已于 2023-01-09 10:31:42 修改
阅读量3.7k 收藏 2
点赞数 3
分类专栏： Inpainting 人工智能论文精度 文章标签： 计算机视觉
于 2022-04-14 13:28:26 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_51339444/article/details/124169364
版权
本文介绍了一种新的图像修复方法——StructureFlow，通过结构感知外观流进行图像修复。该方法结合结构生成器和纹理生成器，利用对抗网络框架优化损失函数，改善了现有算法在结构和纹理还原上的不足。论文通过在CelebA、Places2和Paris数据集上的实验，展示了在PSNR、SSIM和FID等指标上的优秀表现。
摘要由CSDN通过智能技术生成

StructureFlow: Image Inpainting via Structure-aware Appearance Flow

论文导读：

近年来深度学习在Inpainting领域发展迅速，但是现有的算法存在一个共同的问题，要么仅仅保证了全局结构的理想化，要么保证了纹理的理想化，很难二者兼得。鉴于此，这篇论文对此进行了改进和创新，引入结构生成器和纹理生成器的结合，并证明这种方法具有极佳的效果。

Ⅰ. 论文创新点

在这里插入图片描述

1. 结构生成器 （. Structure Reconstructor）

作者团队将生成对抗网络加入到结构生成器的重建损失中，这样可以更好的模拟目标结构：在这里插入图片描述

了解本专栏 订阅专栏 解锁全文 超级会员免费看
天使Di María
关注
专栏目录
订阅专栏
图像修复 : 基于条件纹理和结构并行生成的图像修复——ICCV 2021 【附测评源码】
专注于AI领域前沿技术学习与分享：目标检测、图像修复、超分重建、AI工程化
04-30 3407
图像修复ICCV 2021文章测评：代码简洁、很直观,没有注意到，论文是否提到 BaseLine ，不过感觉就是 似曾相识，可能是之前看的论文太多了, 网络结构、大体就是那样、变过来、变过去、细节决定 提升效果
图形学领域的关键算法及源码链接
weixin_30432579的博客
12-09 818
Last updated December 5, 2012. Try searching this page for keywords like 'segmentation' or 'PLY'. If you would like to contribute links, please e-mail them torms@dgp.toronto.edu. Papers &...
StructureFlow: Image Inpainting via Structure-aware Appearance Flow
最新发布
weixin_41749533的博客
07-10 913
为了验证我们的外观流的有效性，我们训练了一个模型，而不使用纹理生成器中的外观流块。可以看出，我们的StructureFlow比没有外观流操作训练的模型具有更好的性能，这意味着我们的外观流可以帮助纹理生成并提高模型的性能。为这项消融研究训练了两个模型：在外观流的扭曲操作中使用双线性采样训练的模型和不使用采样正确性损失训练的模型。在第二阶段，基于重构的结构，设计了一个使用外观流的纹理生成器来生成图像细节。•为了简化外观流的优化，我们建议使用高斯采样而不是双线性采样，并引入了一种新的采样正确性损失。
图像修复 : ICCV 2021 基于条件纹理和结构并行生成的图像修复【翻译】
专注于AI领域前沿技术学习与分享：目标检测、图像修复、超分重建、AI工程化
04-24 5425
为了增强全局一致性，设计了双向门控特征融合 (Bi-GFF) 模块来交换和组合结构和纹理信息，并开发了上下文特征聚合 (CFA) 模块来按区域细化生成的内容亲和力学习和多尺度特征聚合。在 CelebA、Paris StreetView 和 Places2 数据集上的定性和定量实验证明了所提出方法的优越性
在matlab中查找内置代码-StructureFlow:纸的代码“通过结构感知的外观流程进行图像修补”
05-26
在matlab中查找内置代码结构流 我们的论文代码“”（ICCV 2019） 介绍 我们提出了一个两阶段的图像修复网络，该任务将任务分为两个部分：结构重建和纹理生成。 在第一阶段，使用边缘保留的平滑图像来训练结构重建器，该重建器完成输入的缺失结构。 在第二阶段，基于重建的结构，使用外观流的纹理生成器被设计为产生图像细节。 （从左到右）输入损坏的图像，重建的结构图像，外观场的可视化效果，最终输出图像。 为了可视化外观流场，我们绘制了一些典型缺失区域的采样点。 箭头表示外观流动的方向。 要求 火炬> = 1.0 的Python 3 NVIDIA GPU + CUDA 9.0 张量板 Matlab的 安装 克隆此存储库 git clone https://github.com/RenYurui/StructureFlow 构建高斯采样CUDA包 cd ./StructureFlow/resample2d_package python setup.py install --user 跑步 1.图像准备 我们在三个公共数据集（包括Places2，Celeba和Paris StreetView）上
结构感知图像修复：ICCV2019论文解析
吴建明wujianming_110117
04-04 1775
结构感知图像修复：ICCV2019论文解析 StructureFlow: Image Inpainting via Structure-aware Appearance Flow 论文链接： http://openaccess.thecvf.com/content_ICCV_2019/papers/Ren_StructureFlow_Image_Inpainting_via_Structure-...
论文精度 —— 2017 CVPR《High-Resolution Image Inpainting using Multi-Scale Neural Patch Synthesis》
m0_51339444的博客
08-10 895
论文精度 —— 2017 CVPR《High-Resolution Image Inpainting using Multi-Scale Neural Patch Synthesis》
论文盘点：ICCV 2019 Top 20，MobileNetV3居首！
我爱计算机视觉
08-06 924
ICCV 是计算机视觉领域三大顶会之一，往届都是奇数年开（与此对应ECCV 在偶数年开，CVPR 每年都开），ICCV 2019 于 2019年10月27日-11月2日召开，距今不足一年...
基于视觉的机器人抓取: 论文及代码(Vision-based Robotic Grasping: Papers and Codes)
热门推荐
dsoftware的博客
10-22 2万+
最近总结了基于视觉的机器人抓取的相关论文及代码，同步于github。根据抓取的类别，基于视觉的机器人抓取可以分为两类：2D平面抓取以及6D空间抓取。这个页面总结了近年来涉及到的各种各样的方法，其中大部分都使用了深度学习。总结的中文框架结构如下： 0.综述论文 1. 2D平面抓取 这类方法将抓取，用平面内旋转的矩形框表示； 1.1基于RGB或者RGB-D的方法 采用基于目标检测类的方法，直接得到2D...
CSA修复：图像修复的相干语义注意（ICCV 2019）
02-04
图像修补的相干语义注意（ICCV 2019） | | 介绍 由于局部像素的不连续性，现有的修复方法经常会产生纹理模糊，结构失真的内容。从语义层面上看，局部像素的不连续性主要是因为这些方法忽略了语义相关性和Kong区域的特征连续性。 为了解决这个问题，我们研究了人类在图片修复中的行为，并提出了一种基于深度生成模型的，具有新颖连贯语义注意（CSA）层的方法，该方法不仅可以保留上下文结构，而且可以对缺失部分进行更有效的预测通过对Kong特征之间的语义相关性进行建模。 同时，我们进一步提出一致性损失和特征补丁鉴别器，以稳定网络训练过程并改进细节。 模型架构 CSA架构 功能补丁识别器 先决条件
图像补全_全局细节统统修复——StructureFlow重建新算法实现高性能图像修复
weixin_35838394的博客
01-09 1113
From:arxiv 编译:T.R图像修复技术对于众多修图软件来说十分重要，在深度学习的帮助下图像修复算法的功能越来越强大，甚至对于大幅度污损的照片也能轻松修复。但目前的很多算法在进行图像修复时却面临着结构重建问题或细节问题修复问题的困难，修复结果不尽如人意。为了解决这一问题，来自北大、鹏城实验室和腾讯的研究人员提出了一种新的算法StructureFlow，将图像修复的过程分为边缘保持的低频结构...
利用structflow 一秒钟建立nanotube结构并生成cif文件
qq_42482909的博客
05-02 1057
废话不多说，直接上效果图 推荐大家一个建立tube模型的软件 structure-flow，安装方法非常简单 pip install pymatflow 把结构随便找个文件夹放下，然后直接 sflow tube -i 1T.cif -o tube.cif 直接出结构 ...
论文总结 | Inpainting
qq_34929889的博客
04-15 1124
论文总结|Inpainting 这里写目录标题论文总结|InpaintingICCV2019 ICCV2019 Coherent Semantic Attention for Image Inpainting[paper][code] solution: the discontinuity of the local pixels。即以往的图像修复，往往没有考虑像素之间的连续性，映射到语义上来说就...
ICCV 2023 | 9篇论文看扩散模型diffusion用于图像恢复任务：超分、恢复、增强、去模糊、去阴影...
idol24的博客
01-29 2316
1、HSR-Diff: Hyperspectral Image Super-Resolution via Conditional Diffusion Models尽管高光谱图像(hyperspectral image，HSIs)在执行各种计算机视觉任务中的重要性已被证明，但由于在空间域中具有低分辨率(LR)属性，其潜力受到不利影响，这是由多种物理因素引起的。受到深度生成模型最新进展的启发，提出一种...
可视化反投射：坍塌尺寸的概率恢复：ICCV9论文解读
吴建明wujianming_110117
04-04 404
可视化反投射：坍塌尺寸的概率恢复：ICCV9论文解读 Visual Deprojection: Probabilistic Recovery of Collapsed Dimensions 论文链接： http://openaccess.thecvf.com/content_ICCV_2019/papers/Balakrishnan_Visual_Deprojection_Probabilist...
【ICCV2019】完整论文列表
TomRen
10-30 1万+
ICCV2019 完整论文清单及链接
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

天使Di María

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值