- 博客(5)
- 收藏
- 关注
原创 python处理数据方法(四)
最后收个尾一、根据条件筛选数据,并形成新文件import csvinput = open(r'F:/弄好的数据/生产数据-主机信息_new.csv', 'r')output = open('生产数据-主机信息.csv', 'w',newline="")#newline=""的作用是防止写入文件时形成空行writer = csv.writer(output) for row in csv.reader(input): if "*****" in row[5]: #如果*****在每一个ro
2021-03-02 21:52:22
77
原创 python处理数据方法(三)
这里主要针对的就是格式和编码问题:首先是代码:import os# 转换文件格式和编码方式def to_lf(path, isLF, encoding = 'utf-8'):#这里打开的编码方式是utf-8 """ :param path: 文件路径 :param isLF: True 转为Unix(LF) False 转为Windows(CRLF) :param encoding: 编码方式,默认utf-8 :return: """ ne
2021-03-02 21:15:56
105
原创 python处理数据方法(二)
这部分主要时讲画饼状图和柱状图一、柱状图import matplotlib.pyplot as pltimport matplotlib as mplmpl.rcParams['font.sans-serif']=['SimHei'] #防止出现中文乱码,加上这句GDP =value_max20 #柱子的数值plt.figure(figsize=(20,20)) # 绘图plt.bar(range(20), GDP, align = 'center',color='steelblue',
2021-03-02 21:10:37
111
原创 python处理数据方法(一)
一、获取路径注释很详细了#导入OS模块import os#待搜索的目录路径path =r"C:\Users\*****\Desktop\*******\整理并清洗过的数据\筛选过后"#待搜索的名称#定义保存结果的数组result = []def findfiles(files_path, files_list): #查找文件代码 files = os.listdir(files_path)#listdir指的是找寻当前目录下全部文件和文件夹 for s in fi
2021-03-02 19:57:44
133
原创 python进行简单的爬虫
最近从一个小破网站爬取了四百多万条数据,做了一个数据分析的工作(就是画几张破图)。利用post请求爬取分页数据代码如下import randomimport requestsimport pandas as pdfrom bs4 import BeautifulSoupfrom lxml import etreeimport time#import pymysqlfrom sqlalchemy import create_enginefrom urllib.parse import u
2021-03-02 17:30:51
220
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人