Online Action Detection
Dataset
TVSeries dataset
around 150 minutes of every series
16 hours in total
every set(training, validation and testing set) contains at least one episode of every series
totally have 30 actions
every action occurs at least 50 times in the dataset
Challenge
- 部分信息被观察之后就需做出预测(因为我们需要尽快对动作做出识别)。
- 负样本之间的多样性很大,不应该被误认为正类(因为是在实际过程中,负样本之间的差异性很大)。
- 动作的起始时间未知,所以不清楚从何时开始将这些动作片段合并。
- 实际生活中有很大的类内之间的差异(不同的人之间相应的动作也会有差异)。
Evaluation protocol
因为正样本和负背景帧之间的差别很大,且这种差别对于模型的影响也有很大的影响,所以我们提出了一种新的 calibrated precision :
c
P
r
e
c
=
T
P
T
P
+
F
P
w
=
w
∗
T
P
w
∗
T
P
+
F
P
c
A
P
=
∑
k
c
P
r
e
c
(
k
)
∗
I
(
k
)
P
cPrec = \frac{TP}{TP+\frac{FP}{w}} = \frac{w*TP}{w*TP + FP}\\ cAP = \frac{\sum_k cPrec(k) * I(k)}{P}
cPrec=TP+wFPTP=w∗TP+FPw∗TPcAP=P∑kcPrec(k)∗I(k)
其中w