打开文本是出现编码错误

最新推荐文章于 2021-06-09 09:57:03 发布

风中迷鹿

最新推荐文章于 2021-06-09 09:57:03 发布

阅读量2.1k

点赞数 1

分类专栏：学习中遇到的代码错误文章标签：文本编码错误

本文链接：https://blog.csdn.net/weixin_41442912/article/details/80682536

版权

在进行中文词频分析时，遇到了文本编码错误。通过尝试多种方法无效后，找到了解决方案：将待处理文件的编码方式更改为正确的方式，如UTF-8，从而避免了编码错误的发生。

摘要由CSDN通过智能技术生成

是在编写中文的词频分析时遇到的

先把词频分析的代码放上去

# 对三国演义出场人物次数进行统计
import jieba
txt = open("sanguoyanyi.txt","r",encoding="utf-8").read()
words = jieba.lcut(txt)
new={}
#通过对程序的检查，对程序进行完善
for word in words:
    if len(word)==1:
        continue
    elif word == "诸葛亮" or word == "孔明曰":
        rword="孔明"
    elif word == "关公" or word == "云长":
        rword="关羽"
    elif word == "玄德" or word == "玄德曰":
        rword="刘备"
    elif word == "孟德" or word == "丞相":
        rword ="曹操"
    else:
        rword=word
    # 对原来的字典new中判断是否有rword这个人，没有就返回0，
    # 赋予rword键有就在原来rword所对应的值加1，并赋予rword键
    new[rword]=new.get(rword,0)+1
# 排除系统中不是人名的字
exc={"将军","却说","荆州","二人","