文本特征提取--TFIDF与Word2Vec

1.TF-IDF

1.1 定义

TF-IDF是Term Frequency - Inverse Document Frequency的缩写，即“词频-逆文本频率”。它由两部分组成，TF和IDF。TF-IDF：是一种加权技术。采用一种统计方法，根据字词在文本中出现的次数和在整个语料中出现的文档频率来计算一个字词在整个语料中的重要程度。

1.2 计算过程：

公式如下：

$tfid{f}_{i,j}$表示词频 t