异常行为检测阅读笔记：Future Frame Prediction for Anomaly Detection – A New Baseline

前言

之前写的博客，一直没放出来，今天亮出来晒晒太阳。
深度学习时代的无监督异常行为检测，套路都非常单一，都是用生成式网络（包括自编码器，GAN等）来重构或简单地预测帧，然后通过比较重构误差和阈值来达到判断异常与否的目的。这一篇就是一个典型，不过工作做得蛮充足，效果也不错，值得学习。
本文出自上科大（上海科技大学）高盛华老师团队。code已放，写的很不错：https://github.com/stevenLiuWen/ano_pred_cvpr2018

Motivation

文章总有motivation，如果motivation不清晰，那么本文多半是个水文（狗头，狗头）。本文的Motivation很清晰，就是对于常见的AutoEncoder做异常行为检测，有个严重的潜在问题，就是AutoEncoder往往过完备(overcomplete)，容易引起恒等映射，试想，在测试时候，正常样本本成功重构了，异常样本靠着恒等映射，也被成功“重构”（其实是成功复制）了，那还如何能把它们区分开呢？如果做一个很简单的改动，就是将重构当前帧改为预测后一帧或后几帧，是不是就能避免恒等映射的风险？这就是本文的出发点。那既然选择了预测，那GAN自然成了首选，作者为了保证GAN的生成质量，在优化函数上又下了一些功夫，下面来具体看看吧。

方法与网络框架：Future Frame Prediction Based Anomaly Detection Method

网络架构很清晰啦，输入是连续的$t$帧（本文