使用Python对文本进行共现统计

最新推荐文章于 2024-04-07 16:51:50 发布

小游园

最新推荐文章于 2024-04-07 16:51:50 发布

阅读量3.3k

点赞数 2

分类专栏：智能钻完井

本文链接：https://blog.csdn.net/s0302017/article/details/106040128

版权

本文介绍了如何利用Python对文本数据进行共现统计分析，包括词频计算、共现矩阵构建以及相关性分析，帮助理解文本中词汇的关系。

摘要由CSDN通过智能技术生成

#-*-coding:utf-8-*-
import pandas as pd
list=['A',  'B',    'C',  'D',    'E',  'F',  'G',  'H',    'I', 'J',  'K', 'L']
word_list=[]
for i in range(0,len(list)):
    for j  in range(0,len(list)):
        word_list.append([list[i],list[j]])

data={}
for k in range(0,10):
    with open(str(k)+"_keywords.txt",'r',encoding='utf-8',errors='ignore') as f:
        txt_list=f.read().strip().split("\n")
        for line in txt_list:
            for l in word_list:
                if l[0] in line and l[1]in line:
                    key=str(l[0])+';'+str(l[1])+';'
                    if key in data.keys():
                        data[key]=data[key]+1
                    else:
                        data.update({key:1})
    print(str(k)+' 完成')
dat