Python小题目6：jieba库与get函数字符频次统计的结合使用

于 2021-12-03 08:30:00 发布
阅读量377 收藏 2
点赞数
分类专栏： python初学小题目 文章标签： python 开发语言 后端
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_64660514/article/details/121667380
版权
本文介绍如何使用jieba库读取文本文件，进行不重复分词，并统计词语频次。通过示例代码展示具体实现过程。
摘要由CSDN通过智能技术生成

存在一个文本文件，需要用jieba库分词后再进行字符统计



前言

本题的文本读写很简单，并没有过多的循环。



一、思路

首先进行文件的读取后，再进行文本的分词与统计

1.将文本写入时要用join函数，jion函数之前的元素是str类型。



二、使用步骤



1.引入库，读取文件进行分词（要求分词不重复）

代码如

最低0.47元/天 解锁文章
一个兴趣使然的程序猿罢了
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
Python统计西游记主要人物出场次数（使用jieba分词）.zip
12-12
在本项目中，我们利用Python编程语言和jieba分词库来统计《西游记》主要人物的出场次数。这是一个典型的自然语言处理（NLP）任务，涉及到文本处理、中文分词以及数据统计等多个知识点。下面将详细阐述这些关键点。 ...
python :jieba库的使用大全
总裁余（余登武）博客
09-10 6936
安装 jieba 是一个第三方库，所有需要我们在本地进行安装。 Windows 下使用命令安装：在联网状态下，在anaconda命令行下输入 pip install jieba 进行安装，安装完成后会提示安装成功 . 分词使用 分词的语法就不讲解啦，什么前向匹配，逆向匹配，还需要一个足够大的本地词典。自己构造挺麻烦的。 直接使用包吧。 直接使用jieba.cut #!/usr/bin/env python3 # -*- coding: utf-8 -*- # @Author: yudengwu(余登武） #
Python学习笔记--Jieba库文件词频统计
理想和你的博客
06-07 4025
今天介绍一下Python中第三方库-Jieba库的使用 有时候我们是需要对文本中的单词的频率进行统计的 常规的做法 #单词出现频率的统计 #将文本进行处理 def getText(): txt = open("text.txt","r").read() # 打开并读取所有的文件 txt = txt.lower() # 将文本中的所有字母都改成小写 for ch in...
python字典统计排序1_Python | 零碎知识（1）：字典排序问题
weixin_39608394的博客
11-25 467
Python | 零碎知识（1）：字典排序问题实战：统计Python中的字数问题在 Python 中实施函数“count_words()”，该函数将字符串“s”和数字“n”用作输入，并返回“s”中“n”个出现频率最高的单词。返回值应该是一个元组列表-出现频率最高的“n”个单词及其相应的出现次数“[(, ), (, ), …]”，按出现次数的降序排列。您可以假设所有输入都是小写形式，并且不含标点符号...
计算机二级Python操作题练习（第一套）
碎弧的星星的博客
10-01 1243
s = input("请输入一个字符串:") print("{:*^30}".format(s)) a, b = 0, 1 while a <= 50: print(a, end=',') a, b = b, a+b import jieba txt = input("请输入一段中文文本:") ls = jieba.lcut(txt) for i in ls[::-1]: print(i,end="") import turtle for i...
基于jieba库实现中文词频统计
kongxx的专栏
12-19 1万+
要实现中文分词功能，大家基本上都是在使用 jieba 这个库来实现，下面就看看怎样实现一个简单文本分词功能。 安装 python的工具，安装当然是使用pip安装了。 pip install jieba 使用 先看一个小例子，下面的代码是从一个文本文件中分词并统计出现频率最高的10个单词，并打印到控制台。 #!/usr/bin/env python # -*- coding: utf-8 -*- ...
python jieba分词并统计词频后输出结果到Excel和txt文档方法
09-20
这篇文章主要介绍了如何使用Python语言中的jieba库进行中文文本分词处理，并统计各个词语出现的频次，之后将统计结果输出到Excel和txt文档中。这一功能在自然语言处理（NLP）和文本挖掘中非常常见，能够有效地帮助...
使用python的jieba库实现词频统计.zip
08-06
这个项目可以作为一个基础的文本分析示例，帮助我们理解如何使用Python和jieba库来处理中文文本，进行词频统计和特定内容分析。这对于文本挖掘、情感分析、搜索引擎优化等领域的研究和开发有着重要的参考价值。
计算机二级python题库-基本操作题之jieba分词.zip
最新发布
03-24
- 考生可能需要编写Python程序，使用jieba库对给定的中文文本进行分词，并输出分词结果。 - 可能会要求考生实现简单的文本处理，如统计词频、找出最常见的词语等。 - 还可能涉及到关键词提取，要求考生根据文本...
Python jieba库用法及实例解析
09-18
**Python jieba库**是Python中用于处理中文文本的著名第三方库，专注于中文分词。jieba库的出现解决了中文文本处理中的一个重要问题——如何有效地将连续的汉字序列分割成有意义的词汇。中文文本不同于英文，单词...
二级python易错点整理，都是干货~
m0_61262547的博客
09-02 435
输入、输出 ·空行回车结束录入 data=input(“请输入数据：”) while data: ...... ...... data=input(“请输入数据：”) ·一次性输入3个数并赋值 #列表推导式 a, b, c = [eval(x) for x in input().split()] ·格式化输出 #填充字符@，右对齐，输出宽度30位，千分位分隔符 print("{0:@>30,}".format(n)) 字符串
使用jieba(中文分词)库统计词频
aieraisiji的博客
03-10 6009
一、 基本框架 以统计水浒传人物出场次数为例，列出出场次数最高的前三名。 import jieba #引用中文分词库 txt = open(&quot;shuihu.txt&quot;,&quot;r&quot;,encoding=&quot;gb18030&quot;).read() #读取文件，注意编码 excludes = {&quot;两个&quot;,&quot;一个&quot;} #通过不断优化排除结果中
词频统计排序的几种方法(手写 pandas NLTK)
02-05 3951
#在list中词频统计小程序分析 ''' 利用dict将list中的词频统计一kv的形式展现出来 ''' ls = ["综合", "理工", "综合", "综合", "综合", "综合", "综合", "综合", \ "综合", "综合", "师范", "理工", "综合", "理工", "综合", "综合", \ "综合", "综合", "综合", "理工", "理工"...
数据挖掘之jieba模块使用(读取单个文本内容(txt,word,pdf),对文章进行分词(中文)统计每个词语出现的次数并按从大到小排序，同时通过停用词库排除停用词)
qq_43552025的博客
04-13 3032
实验室终于开始搞新的东西了，我又可以学到更大佬的知识了~（虽然以前的知识都没掌握…) 这次分享实验室留的作业（对jieba模块的使用） 首先要设置停用词 # 设置停用词 print('start read stopwords data.') stopwords = []#创建一个字典 with open(stopwords_path, 'r', encoding='utf-8') as f: ...
python读写txt文件，并用jieba库进行中文分词
热门推荐
songrenqing
06-01 2万+
在虎扑上随便找了一段文字，粘贴到word.txt文件中，然后对这段文字进行处理。其中用到的matplotlib库，主要是用来绘图；jieba库，对文字进行分词；wordcloud库，构建词云。一、引用库import jieba import matplotlib as mpl import matplotlib.pyplot as plt from wordcloud import WordClo...
用jieba进行中文分词并统计中文词频
wqazxcvfr的博客
11-22 1万+
用jieba进行中文分词并统计中文词频 安装jieba pip install jieba 统计三国演义出场人物次数： import jieba # 打开读取文件名为threekingdoms.txt的三国演义文档 txt = open('threekingdoms.txt','r', encoding = 'utf-8').read() # jieba.lcut() 精确模式切分中文 txt ...
中文词频统计
weixin_30662011的博客
09-29 101
中文分词 下载一中文长篇小说，并转换成UTF-8编码。 使用jieba库，进行中文词频统计，输出TOP20的词及出现次数。 排除一些无意义词、合并同一词。 对词频统计结果做简单的解读。 import jieba t=open('ghj.txt','r',encoding='utf-8').read() words=list(jieba.cut(t)) ...
Python小题目5：jieba库的初步使用
不知名程序猿的博客
12-02 724
jieba库中精确模式的简单应用 文章目录 前言 一、pandas是什么？ 二、使用步骤 1.引入库 2.读入数据 总结 前言 提示：这里可以添加本文要记录的大概内容： 例如：随着人工智能的不断发展，机器学习这门技术也越来越重要，很多人都开启了学习机器学习，本文就介绍了机器学习的基础内容。 提示：以下是本篇文章正文内容，下面案例可供参考 一、pandas是什么？ 示例：pandas 是基于NumPy 的一种工具，该工具是为了解决数据分
用python做频数分析_Python实现词频分析器，查看文章各种词语的使用次数
weixin_39806818的博客
11-24 450
功能不多说，直接上图。词频分析结果输入文章，输出词频结果。工具Python、jieba步骤1、安装jieba库。pip install jieba2、 导入引用，并读取文件。import jiebatxt_f = open('./七月与安生.txt')s = txt_f.read()txt_f.close()3、用jieba库进行分词，并统计各个词的频率。seg_list = jieba.cut(...
Python编程：jieba分词库在金融工程中的应用
4. **集成性好**：jieba可以轻松与其他Python库（如numpy、pandas）结合，方便进行数据处理和分析。 文章强调了Python在大数据AI时代的重要性，其广泛适用性和丰富的资源库使得Python成为数据分析和人工智能的首选...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

一个兴趣使然的程序猿罢了

有钱的捧个人场，没钱的想想办法

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值