POLY2模型
poly2模型进应用征的“暴力”组合的方式
该模型对所有的特征进行了两两交叉(特征 X j 1 X_j1 Xj1和 X j 2 X_j2 Xj2),并对所有的特征组合赋予权 W h ( j 1 , j 2 ) W_h(j_1,j_2) Wh(j1,j2)。POLY2通过暴力组合特征的方式,在一定程度上解决了特征组合的问题。
POLY2模型本质上仍然是线性模型,训练方法与逻辑回归一样。
POLY2存在缺陷:
- POLY2在进行无选择的特征交叉,在做one*hot编码时,使原本就非常稀疏的特征向量更加稀疏,导致大部分交叉特征的权重缺乏有效的数据进行训练,无法收敛
- 权重参数由N直接上升到