jieba库词频统计_jieba库的使用与词频统计

1、词频统计

(1)词频分析是对文章中重要词汇出现的次数进行统计与分析，是文本

挖掘的重要手段。它是文献计量学中传统的和具有代表性的一种内容分析方法，基本原理是通过词出现频次多少的变化，来确定热点及其变化趋势。

(2)安装jieba库

安装说明

代码对 Python 2/3 均兼容

全自动安装：easy_install jieba 或者 pip install jieba / pip3 install jieba

半自动安装：先下载 http://pypi.python.org/pypi/jieba/ ，解压后运行 python setup.py install

手动安装：将 jieba 目录放置于当前目录或者 site-packages 目录

通过 import jieba 来引用

示例、全自动安装

在命令行下输入指令：

pip install jieba

(2) 安装进程：

2、调用库函数

1、输入import jieba与使用其中函数

3、python代码

#!python3

#-*- coding: utf-8 -*-import os, codecs

import jiebafromcollections import Counter

def get_words(txt):

seg_list=jieba.cut(t