![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
数据挖掘
文章平均质量分 78
liuph_
这个作者很懒,什么都没留下…
展开
-
基于历史数据查询的爬虫操作
网站:http://www.szmb.gov.cn/article/QiXiangJianCe/目的:抓取过去一年内深圳各个区的逐小时降雨数据历史查询需要通过网页中的日历控件选择,而且日历控件只有在点击日期之后才会生效,也就是说,要查询2016年7月3日12:00的数据,需要先点击日历,然后通过小时和分钟的加减获得12:00,再选择年、月和日。这样的操作能通过selenium实现,困难在于原创 2016-07-03 13:26:45 · 3486 阅读 · 0 评论 -
Python爬虫抓取动态数据
一个月前实习导师布置的任务,通过网络爬虫获取深圳市气象局发布的降雨数据。界面如下。心想,爬虫不太难的,当年跟zjb爬煎蛋网无(mei)聊(zi)图的时候,多么清高。由于接受任务后的一个月考试加作业一大堆,导师也不催,自己也不急。但是,导师等我一个月都得让我来写意味着这东西得有多难吧。。。今天打开一看的确是这样。网站是基于Ajax写的,数据动态获取,所以无法通过下载源代码然后解析获得原创 2016-07-02 17:12:04 · 17856 阅读 · 1 评论 -
Python CGDAL类——支持栅格数据的栅格计算/线性增强/滤波增强
# -*- coding: UTF-8 -*-'''python version: 2.7.11numpy ver=1.11.1gdal ver=2.0.3Author: LiuphDate: 2016/9/9Description: This is a GDAL Class adapted from the Python GDAL_OGR Cookbook document原创 2016-09-09 22:56:31 · 2063 阅读 · 2 评论