推荐系统--------------TF-IDF

TF-IDF:词频-逆文档频率
是一种用于资讯检索与文本挖掘的常用加权技术
TF-IDF是一种统计方法，用以评估一个字词对于一个文件或者一个语料库中的其中一份文件的重要程度，字词的重要性随着它在文件中出现的次数成正比增加，但是同时会随着它在语料库中出现的频率成反比下降。
TF-IDF的主要思想是：如果某个词或者短语在一片文章中出现的TF高，并且在其他文章中很少出现，则认为此词语或者短语具有很好的类别区分能力，适合用来分类
TF-IDF加权的各种形式长被搜索引擎应用，作为文件与用户查询之间相关程度的度量或者评级
TF：词频—>指的是某一种给定的词语在该文件中出现的频率，这个数字是对词数的归一化，以防止偏向更长的文件，（同一个词语在长文件里可能会比段文件有更高的次数，而不管该词语重要是否）

其中，TFi.j表示词语i在文档j中出现的频率，ni.j表示i在j中出现的次数，n .j表示文档j的总次数
IDF------->逆向文件频率
是一个词语普遍重要性的度量，某一特定的词语IDF，可以有总文档数目除以包含盖刺鱼之文档数目，再将得到的商取对数得到：

其中IDFi表示词语i在文档集中的逆文档频率，N表示文档集中的文档总数，Ni表示文档集中包含了词语i的文档数࿰