python,中文去重,统计中文,字典保存,读写excel
一些基础的python程序,写出来避免搬砖
包含去重…后续待添加
1、句子去重:
def uniqueInfo(textList, score):
"""比较一个List中句子,去重重复度比较高的"""
res = [textList[0]]
for i1 in textList[1:]:
for i2 in res:
if i1 in i2 or i2 in i1: continue
s1 = sum([1 if i
原创
2021-08-04 14:43:11 ·
666 阅读 ·
0 评论