图像检测系列之(12)异常检测(13)拼接伪造(14)deepfake | ICCV2021生成对抗GAN汇总梳理...

十二、图像检测-异常检测

35 Learning Unsupervised Metaformer for Anomaly Detection

  • 图像异常检测 (Anomaly detection,AD) ,解决图像异常的分类或定位问题。本文解决基于重建的图像 AD 方法的两个关键问题,即模型适应性和重建差异性。前者将 AD 模型概括为处理广泛的对象类别,而后者为定位异常区域提供了有用的线索。

  • 方法核心是一个无监督的通用模型,称为 Metaformer,利用元学习模型参数来实现高模型适应能力和实例感知注意力来强调用于定位异常区域的焦点区域,即探索 这些感兴趣区域的重建差距。用工业图像 MVTec AD 数据集上的 SOTA 结果证明方法有效性。

a6344dc21627e8fcd4789516df539f31.png

十三、图像检测-拼接伪造

36 Reality Transform Adversarial Generators for Image Splicing Forgery Detection and Localization

  • 许多伪造图像在图像编辑工具和卷积神经网络 (CNN) 的帮助下变得越来越逼真,实际场景中,需要验证侦测这些伪造图像的能力。生成和检测伪造图像的过程与生成对抗网络 (GAN) 的原理类似。

  • 由于伪造图像的修图过程需要抑制篡改伪影并保留结构信息,可视为图像风格变换,本文提出一种假到真变换的“生成器GT” ;为了检测篡改区域,还提出一种基于多解码器单任务策略的定位“生成器GM” 。通过对抗训练两个生成器,模拟伪造者和验证者之间的对抗。

3d820879724b15fb2d8b3057229b2074.png

十四、图像检测-deepfake

37 Artificial Fingerprinting for Generative Models: Rooting Deepfake Attribution in Training Data

  • 生成对抗网络( GANs )的不断发展,逼真图像生成已达到一个新的质量水平。但这种深度伪造的恶意使用,引发人们对视觉错误信息的忧虑。

  • 针对deep fake 检测和反检测,本文寻求一种可持续的方案。通过引入人工指纹的模型,方法简单有效:首先将人工指纹嵌入到训练数据中,这种指纹可从训练数据转移到模型生成中,出现在生成的数据。

  • 实验表明指纹解决方案( 1 )适用于各种前沿生成模型,( 2 )导致生成质量的副作用可以忽略不计,( 3 )对图像级和模型级的扰动保持鲁棒性,( 4 )难以被对手检测到,( 5 )将深度伪造的检测和归属转换为琐碎的任务,并优于最近的最先进的基线。

9a88140547e97752c1dbc80c6d17a8b2.png

38 Joint Audio-Visual Deepfake Detection

  • Deep fakes (“深度学习”+“伪造”)中,包含有比如算法生成的视频等数据。虽然它们可能多是娱乐之用,但也可能被滥用于伪造演讲和传播错误信息。

  • 检测伪造的数据已产生一些方法、以及数据集,而音频(如合成语音从文本到语音或语音转换系统)和关联的视频音频模式则一直相对匮乏。

  • 这项工作提出一种新的视觉/听觉 deep fake 联合检测任务,并表明利用视觉和听觉模式之间的内在关系可以帮助 deep Fake 检测。

ecf8c027d0b11d1064ab3a114494f65e.png

39 Learning Self-Consistency for Deepfake Detection

  • 提出一种新方法检测模型伪造的图像。引入了一种新的表示学习方法,称为:成对一致性学习( PCL ),训练卷积网络来提取这些源特征,并检测深度假图像。方法还提出一种新的图像合成方法,为 PCL提供训练数据。

  • 七个主流数据集上的实验结果表明了方法的有效性。

278d18d8316ccdee321459095d2651b3.png

猜您喜欢:

aa082b56962635b6a7840bd2183b8e4e.png 戳我,查看GAN的系列专辑~!

一顿午饭外卖,成为CV视觉的前沿弄潮儿!

超110篇!CVPR 2021最全GAN论文汇总梳理!

超100篇!CVPR 2020最全GAN论文梳理汇总!

拆解组新的GAN:解耦表征MixNMatch

StarGAN第2版:多域多样性图像生成

附下载 | 《可解释的机器学习》中文版

附下载 |《TensorFlow 2.0 深度学习算法实战》

附下载 |《计算机视觉中的数学方法》分享

《基于深度学习的表面缺陷检测方法综述》

《零样本图像分类综述: 十年进展》

《基于深度神经网络的少样本学习综述》

a5d7f501e7b0a04ae86469675b1a5956.png

  • 0
    点赞
  • 19
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值