icdar evaluaion

• 预测框与GT之间的匹配关系有五种情况，其中第一个位置表示GT框，第二个位置表示预测框。

1. 无匹配；
2. 一对一的匹配；
3. 一对多的匹配；
4. 多对一的匹配；
5. 多对多的匹配；

图片来自 这里

• DetEval-Evaluation software for object detection algorithms为评测工具，评测匹配中的一对一、一对多和多对一三种匹配关系。预测结果形式如下，其中icdar2003所在的tag为旧的一对一的评测结果，score为DetEval方式的评测结果。

  <evaluation noImages="2">  #图片数
    <icdar2003 r="0.655793" p="0.488678" hmean="0.560035" noGT="11" noD="14"/> #1对1匹配方式
    <score r="0.418182" p="0.271429" hmean="0.32919" noGT="11" noD="14"/>  #DetEval方式
  </evaluation>

• 准确率、召回率和调和平均数（harmonic mean or f-score）

1. 准确率为预测框与真实框间的公共部分关于预测框的函数；
2. 召回率为预测框与真实框间的公共部分关于真实框的函数;
3. F1值，为准确率和召回率的调和平均数；

• 计算公式

1. 准确率和召回率的计算公式；

1. 一对一的匹配方式，ICDAR2013older评测方式；

1. 单张图一对一、一对多、多对一的计算公式；

1. 多张图的计算公式

1. 最终的准确率、召回率和F1值

   

    

参考文献:

1. ICDAR2013文本检测算法的衡量方法（二）Rectangle Matching与DetEval

2. DetEval-Evaluation software for object detection algorithms