- 博客(18)
- 收藏
- 关注
RSS订阅原创 python数据分析之读写txt文件
从文件中读取数据读取整个文件f_path=r'C:\Users\LPH\Desktop\my_project\波浪和风向\波浪和风向部分数据\连云港部分数据\201706003.txt'with open(f_path) as f: contents=f.read() print(contents)函数open返回一个表示文件的对象，对象存储在f中关键字with...
2018-08-28 17:18:39
20957
原创 python数据分析之json文件
json格式：这里绘制世界人口地图世界人口json文件，这个文件其实是一个很长的python列表，其中每个元素都是一个包含四个键的字典：国家名，国别码，年份和表示人口数量的值。这里只关心每个国家2010年的人口数量。打印出国别码以及相对应国家在2010年的人口数量import json#将数据加载到一个列表中filename=r'C:\Users\LPH\Deskt...
2018-08-24 21:51:46
4335
7
原创 python数据分析之CSV文件
之前有提到过CSV文件：这里CSV文件：将数据作为一系列以逗号分隔的值写入文件。在excel中就是以表格线代替逗号csv模块包含在Python标准库里，可以用于分析CSV文件中的数据行，让我们提取感兴趣的数值。import csvfilename=r'C:\Users\LPH\Desktop\pythoncrashcourse配套资源\ehmatthes-pcc-6bfe...
2018-08-24 17:11:34
5491
原创 python数据分析之pygal画廊
可视化包pygal可以生成可缩放的矢量图形文件，对于需要在尺寸不同的屏幕上显示的图表很有用，它将自动缩放，以适合观看者的屏幕。使用pygal来模拟掷一个骰子的结果import numpy as npclass Die(): def __init__(self,num_sizes=6): self.num_sizes=num_sizes ...
2018-08-24 14:07:24
621
原创 python随机漫步
随机漫步：每次行走都完全是随机的，没有明确的方向，结果是由一系列随机决策决定的。1 创建RandomWalk()类from random import choiceclass RandomWalk(): def __init__(self,num_points=500): #初始化随机漫步的步数 self.num_points=num...
2018-08-24 12:53:14
684
2
原创 python数据分析之matplotlib学习二
1 figure 图像import matplotlib.pyplot as pltimport numpy as npx=np.linspace(-1,1,30)y1=2*xy2=x**2plt.figure()#下面的都属于这一张figureplt.plot(x,y1)plt.figure(num=3,figsize=(8,5))#下面的都属于这一张figure。可...
2018-08-22 15:33:05
927
原创 python数据分析之爬虫七：爬取豆瓣书籍排行榜Top250
豆瓣书籍Top250链接：https://book.douban.com/top250?icn=index-book250-all知识点及实例部分参考：python数据分析之爬虫五：实例python数据分析之爬虫三：BeautifulSoup库爬虫实例import reimport requestsfrom bs4 import BeautifulSoupimport pa...
2018-08-18 12:51:55
5063
原创 python数据分析之爬虫六：Scrapy爬虫
一 Scrapy爬虫框架介绍框架简介是基于python实现爬虫的重要技术路线。scrapy不是一个函数功能库，而是一个爬虫框架。包括7个部分 ：5+2结构 5个主题部分，2个中间键。5个主模块：Spiders+ DOWNLOADER+ ENGINE+ SCHEDULER+ ITEM PIPELINESSpider与 ENGINE ENGINE...
2018-08-15 17:20:34
958
转载 《pandas入门》之read_excel()和to_excel()函数解析
前言数据分析时候，需要将数据进行加载和存储，本文主要介绍和excel的交互。read_excel()加载函数为read_excel(),其具体参数如下。read_excel(io, sheetname=0, header=0, skiprows=None, skip_footer=0, index_...
2018-08-14 15:54:10
1002
转载 CSDN怎么转载别人的博客
转 CSDN怎么转载别人的博客 <div class="article-info-box"> <div class="article-bar-top d-flex">
2018-08-14 10:51:40
209
原创 python数据分析之爬虫五：实例
实例一：淘宝商品比价定向爬虫打开淘宝，输入衬衫，链接为：https://s.taobao.com/searchq=%E8%A1%AC%E8%A1%AB&imgfile=&js=1&stats_click=search_radio_all%3A1&initiative_id=staobaoz_20180812&ie=utf8&bcoffset=...
2018-08-12 20:06:09
8678
2
原创 python数据分析之爬虫四：正则表达式
一 正则表达式简介正则表达式是用来简洁表达一组字符串的表达式。使用它的优势是：简洁，一行胜千言。表达了一组字符串的模式或特征。正则表达式主要用于字符串的匹配。 二：正则表达式语法正则表达式语法由字符和操作符构成。正则表达式语法示例：上图的第三个中‘-’是负号，三 Re库的基本使用Re库是python的标准库，不需要额外...
2018-08-12 17:25:54
333
原创 python数据分析之爬虫三：BeautifulSoup库爬虫实例
实例一：中国大学排名定向爬虫网址.：http://www.zuihaodaxue.cn/zuihaodaxuepaiming2016.html查看定向爬虫的可行性 每个大学以tr标签开始，每个大学的每项信息都以td标签开始。判断定向爬虫的可行性：打开robots协议看是否有爬虫限制http://www.zuihaodaxue.cn/robots.txt并...
2018-08-12 10:38:54
3190
原创 python数据分析之爬虫二：BeautifulSoup库
BeautifulSoup库中文文档Beautiful Soup库的安装小测页面源代码：HTML5.0格式。获取源代码的方式：在页面右击选择源代码或用Requests库获取demo.html源代码。from bs4 import BeautifulSoupsoup=BeautifulSoup('<p>data</p>','html.parser')...
2018-08-11 16:20:52
703
原创 python数据分析之爬虫一：Requests库
一：Requests库Requests库小试Requests库的7个主要方法方法 说明 requests.request() 构造一个请求，支持以下各方法的基础方法 requests.get() 获取HTML网页的主要方法，对应于HTML的GET requests.head() 获取HTML网页头信息的方法。对应HTML的HEAD reque...
2018-08-10 10:33:20
490
原创 python数据分析之pandas学习一
链接（官网文档）：点击这里Pandas是python第三方库，提供高性能易用数据类型和分析工具。import pandas as pdpandas基于Numpy实现，常与Numpy和Matplotlib一同使用。Numpy pandas（Series+dataframe） 基础数据类型 扩展数据类型 关注数据的结构表达 关注数据的应用表达 维度：数据间关系...
2018-08-08 16:00:12
444
原创 Python数据分析之matplotlib学习一
参考官方网站：链接这个也可以Matplotlib库的使用，Matplotlib库是由各种可视化类构成，内部结构复杂。matplotlib.pyplot是绘制各类可视化图形的命令子库，相当于快捷方式。import matplotlib.pyplot as plt1 matplotlib库小测x轴默认为列表的索引值。2 matplotlib库小测综合3 py...
2018-08-07 17:18:48
746
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人