数据分析
象屿骑象人
数据分析/挖掘/建模
展开
-
高德地图实时路况数据-拥堵持续时长预测
一、Request爬取数据1.获取AK进入【高德地图开放平台】→注册认证成为开发者→【应用管理】→【我的应用】→【创建新应用】→获得AK2.所需爬取数据研究所需数据主要由两部分构成,①高德地图开放平台交通态势数据(简称交通态势数据),爬取链接:https://restapi.amap.com/v3/traffic/status/road?②高德地图西安城市交通详情数据(简称交通详情数据),爬取链接:https://report.amap.com/detail.do?city=610100第一原创 2020-07-06 18:50:13 · 11338 阅读 · 17 评论 -
selenium爬取墨迹天气
我自己需要天气数据会直接使用高德、百度开放平台的API获取,比较方便。但因为同学研究需求,他觉得墨迹天气的天气数据相对比较准确一点,所以帮他爬取了墨迹天气的天气数据。1. 选用selenium当时墨迹天气自身提供的API是收费的,现在不知如何,requests的动态爬取针对墨迹天气的页面无法实现,因此选用selenium模仿浏览器进行爬取。2. 所需爬取内容爬取页面的链接为:https://tianqi.moji.com/aqi/china/shaanxi/xian所需爬取的内容为下方图片中红框内原创 2020-07-03 15:07:22 · 553 阅读 · 0 评论 -
百度地图实时路况数据-拥堵的生存分析
一、Request爬取数据1.获取AK进入【百度地图开放平台】→注册认证成为开发者→【应用管理】→【我的应用】→【创建应用】→获得AK2.爬虫代码import requestsimport jsonimport timeimport datetimeimport csvimport pandas as pdak = '你的ak' #这里ak就不写自己的了k = 0def get_one_page(location): url_1 = 'http://api.map.b原创 2020-06-29 20:35:41 · 7236 阅读 · 28 评论