![](https://img-blog.csdnimg.cn/20201014180756919.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫
文章平均质量分 50
czychen1997
这个作者很懒,什么都没留下…
展开
-
leaflet+OpenstreetMap加载交通状态信息
根据爬取到的交通数据文件,采用k-means聚类算法进行聚类,其结果通过地图显示出来。因此我在网上找到了一个轻巧、灵活的地图加载插件Leaflet,然后用OpenStreetMap做底图。一,数据介绍首先这是聚类结果的部分截图:其中cid表示时间和检测器编号,在features中分为两类:有数据与无数据的内容。type=1代表无数据,type=0代表有数据,values内的三个数据...原创 2021-03-30 22:23:00 · 707 阅读 · 0 评论 -
python爬取动态js加载的内容
这几天开始写毕业设计,打算做一个交通大数据处理方面的系统。因此选取了一个国外的交通数据开放网站(国内不开放原创 2019-04-06 15:55:22 · 9640 阅读 · 3 评论 -
python爬取文件自动保存本地
趁热又把文件保存到本地的代码实现了。根据目标网站的文件分类形式我选择先处理站点每5分钟的数据,以district->year->month的文件夹嵌套形式来存储文件。同时用类包装了上一篇爬虫的代码,代码分别如下:AutoFile.pyimport osimport urllibfrom urllib.request import urlopenimport ti...原创 2019-04-06 23:42:56 · 3242 阅读 · 4 评论