【Python数据挖掘入门】2.1 文本分析-语料库文件读取（os.walk&os.path.join方法）

小成小成小成

已于 2023-02-27 09:48:10 修改

阅读量760

点赞数 1

分类专栏： python 文章标签： django python 后端

于 2023-02-23 15:39:07 首次发布

本文链接：https://blog.csdn.net/momomuabc/article/details/129180284

版权

示例数据为Sogou实验室提供的语料数据，下载地址如下：
链接: https://pan.baidu.com/s/1vtHxR4zuEiGd3ot_wj4oeQ 提取码: sh7y

一、使用os使用示例

使用os.path模块中的os.walk 方法和os.path.join方法，将一个文件夹及文件夹中的全路径读入内存
读取示例：

import os
import os.path

filepath = []
dirspath = []
for root, dirs, files in os.walk(
        "D:\SogouC.mini\Sample"):
        #root表示当前正在访问的文件夹路径
        #dirs 表示该文件夹下的目录名list
        #files 表示该文件夹下的文件list
    
    #遍历文件：
    for name in files:
        filepath.append(os.path.join(root,name))#将root和files拼接并读入filepath中
    #遍历所有的文件夹：
    for d in dirs:
       dirspath.append(os.path.join(root,d))#将root和dirs拼接并读入dirspath中
"""
变量查看
filespath:['D:\\SogouC.mini\\Sample\\C000007\\10.txt', 'D:\\SogouC.mini\\Sample\\C000007\\11.txt', 'D:\\SogouC.mini\\Sa