- 博客(2)
- 收藏
- 关注
原创 处理中文语料 codec can‘t decode byte 0xaa in position 134: illegal multibyte sequence问题
import osimport jiebaimport chardetpath = "D:/python/复旦中文文本训练集/train/"path1 = "D:/python/复旦中文文本训练集/"def check(path: str): with open(path, 'rb') as f: print(chardet.detect(f.read())['encoding'], ': ', i)发现都是GB2312编码但是open起来就有问题了..
2021-11-23 16:52:36 928
原创 用python摘取汇总多个txt文件关键信息汇总写入excel
最近帮人写了几个小程序,记录下原始数据长这样子,有很多这样的文件,放在同一文件夹,格式一样最后要生成这样子的excelimport xlsxwriter as xwimport ospath = "D:/数据/数据/" # 引号里面输入你存放要汇总文件的文件夹地址,注意不要添加其他无关文件path2 = "D:/数据/" # 引号里面输入你存放要输出excel的地址,注意不要和要汇总的文件放在一个文件夹filenames = os.listdir(path)先生成一个..
2021-11-21 20:34:27 986
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人