Python 文本文件内容批量抽取

最新推荐文章于 2024-07-24 09:22:30 发布

zetn_liu

最新推荐文章于 2024-07-24 09:22:30 发布

阅读量1.8w

点赞数 4

分类专栏：数据处理机器学习文章标签： Pyhton 文本文件处理批量内容抽取

本文链接：https://blog.csdn.net/qq_22885109/article/details/80819916

版权

这篇博客记录了一个Python新手使用脚本批量抽取文本文件中特定数据的过程。内容涉及从每行数据中提取Top 7评分，并与阈值比较，生成机器学习模型的训练样本数据。

摘要由CSDN通过智能技术生成

Python新手编写脚本处理数据，各种心酸各种语法查找，以此留念！

原始数据格式如下图所示：

这里是一个人脸测试数据，其中每行第一个为测试图片编号，后面为Top 7图片编号及其对应的评分，即与测试图片的相似度度量结果。我们这里的目的是将每行Top 7对应的评分数据抽取出来，并且将评分第二的数值与一个阈值（这里是0.7）进行比较，超过阈值表示此次测试成功，结果为正样本，记为1，否则置0。并最终将其保存至另一个文本文件用于作为机器学习模型的训练样本数据。 Python脚本处理后的文件格式如下所示：

对应的Python代码如下所示，附有小白详细注释。。。

# -*- coding: cp936 -*-
import re
import linecache
filename = 'face_test_data.txt'

with open(filename, 'r') as f:
    line = f.readline()
    while line:
        eachline = line.split()###按行读取文本文件
        #print eachline 返回一个列表，以空格作为元素拆分标识
        #print line 返回的是一整行数据，相当于一个字