主流分词工具性能测试结果对比

Jieba
Time expenditure: 159.01109504699707
Accuracy score: 0.8949003450398567
Macro f1 score: 0.8539702787662644
Micro f1 score: 0.8949003450398567
Classification report:
              precision    recall  f1-score   support

          1       0.92      0.93      0.92   7742534
          2       0.64      0.73      0.68   1725401
          3       0.91      0.92      0.91   7742534
          4       0.93      0.87      0.90   7934742

avg / total       0.90      0.89      0.90  25145211

################
FoolNLTK
Time expenditure: 3013.650370836258
Accuracy score: 0.8967728685991142
Macro f1 score: 0.8673202157924605
Micro f1 score: 0.8967728685991142
Classification report:
              precision    recall  f1-score   support

          1       0.92      0.91      0.92   7742534
          2       0.84      0.67      0.75   1725401
          3