文本分类 特征选择

特征选择技术的比较：PSO，PCA和信息增益
作为与基于PSO的特征选择的比较，我们利用PCA和信息增益来减少我们问题的特征空间的维度。主成分分析（PCA）[51] 是一种有用的统计技术，通过减少维数来压缩数据。它通过遗漏冗余信息找到高维数据中的模式并将其转换为较低维度。PCA通过计算协方差矩阵的特征值和特征向量来开始其处理。这些向量提供有关数据中模式的信息。特征向量对应于包含最重要模式的最高特征值，其中向量对应于下一个最高特征值包含比第一特定值更少的信息但是比其他特征值更多。

信息增益对应于当数据相对于特定特征在不同类别之间分布时由于熵的减少而获得的增益。我们计算每个特征的信息增益10并按升序对它们进行排序。然后选择前几个特征并用于训练分类器。我们在表17中报告了PCA和基于信息增益的特征空间缩减技术的结果以及PSO的结果。它还报告f n / k的值（各个型号所需的特征数量）。结果表明，与所有情况下的PCA和信息增益相比，基于PSO的方法获得了更好的结果。此外，应该注意的是，基于PSO的模型需要比其他两种技术相对更少的特征。