- 博客(5)
- 收藏
- 关注
原创 python处理数据方法(四)
最后收个尾 一、根据条件筛选数据,并形成新文件 import csv input = open(r'F:/弄好的数据/生产数据-主机信息_new.csv', 'r') output = open('生产数据-主机信息.csv', 'w',newline="")#newline=""的作用是防止写入文件时形成空行 writer = csv.writer(output) for row in csv.reader(input): if "*****" in row[5]: #如果*****在每一个ro
2021-03-02 21:52:22 89
原创 python处理数据方法(三)
这里主要针对的就是格式和编码问题: 首先是代码: import os # 转换文件格式和编码方式 def to_lf(path, isLF, encoding = 'utf-8'):#这里打开的编码方式是utf-8 """ :param path: 文件路径 :param isLF: True 转为Unix(LF) False 转为Windows(CRLF) :param encoding: 编码方式,默认utf-8 :return: """ ne
2021-03-02 21:15:56 115
原创 python处理数据方法(二)
这部分主要时讲画饼状图和柱状图 一、柱状图 import matplotlib.pyplot as plt import matplotlib as mpl mpl.rcParams['font.sans-serif']=['SimHei'] #防止出现中文乱码,加上这句 GDP =value_max20 #柱子的数值 plt.figure(figsize=(20,20)) # 绘图 plt.bar(range(20), GDP, align = 'center',color='steelblue',
2021-03-02 21:10:37 119
原创 python处理数据方法(一)
一、获取路径 注释很详细了 #导入OS模块 import os #待搜索的目录路径 path =r"C:\Users\*****\Desktop\*******\整理并清洗过的数据\筛选过后" #待搜索的名称 #定义保存结果的数组 result = [] def findfiles(files_path, files_list): #查找文件代码 files = os.listdir(files_path)#listdir指的是找寻当前目录下全部文件和文件夹 for s in fi
2021-03-02 19:57:44 139
原创 python进行简单的爬虫
最近从一个小破网站爬取了四百多万条数据,做了一个数据分析的工作(就是画几张破图)。 利用post请求爬取分页数据 代码如下 import random import requests import pandas as pd from bs4 import BeautifulSoup from lxml import etree import time #import pymysql from sqlalchemy import create_engine from urllib.parse import u
2021-03-02 17:30:51 231
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人