论文笔记:End-to-End Adversarial Retinal Image Synthesis

本文探讨了一种使用GAN进行视网膜眼底图像合成的新方法,旨在解决现有方法中因依赖血管分割模型而导致的问题。通过结合对抗性自动编码器和图像到图像转换,该模型能在测试时直接生成血管网络图像和最终的视网膜图像。作者还提出了球形插值策略来控制全局视觉属性,如光学盘位置和血管数量。
摘要由CSDN通过智能技术生成

这是一篇应用创新型文章,因此仅作较为精简的笔记。

本文使用GAN进行视网膜眼底图像合成,并将其应用于视网膜血管图分割模型的训练。

在本文之前,也有人使用过GAN进行视网膜眼底图像合成,缺点是:
由于采用(视网膜血管网络,视网膜眼底图像)成对训练,且视网膜血管网络又由真实视网膜图像经过另一个分割网络得到,所以一旦原始图像失焦,视网膜血管网络就会不完整,进而影响图像合成

本文提出的方法不再依赖于这个独立的视网膜血管分割模型:
在这里插入图片描述
在训练时,可以看到,红色框内部就是通常的GAN结构,采用(视网膜血管网络,视网膜眼底图像)成对训练,而作为用来生成视网膜眼底图像的血管网络,由蓝色框内所表示的autoencoder得到。
在测试时,只需取得latent space,生成血管网络图像,再生成最终的结果,即视网膜眼底图像。

以下是训练时更加细节的流程图:
在这里插入图片描述

图中左半部分是用来寻找latent space的auto-encoder。右半部分可以看作是GAN的一种小变形。

对于auto-encoder:

  • 1
    点赞
  • 11
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值