- 博客(15)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 Echart异步加载json、ajax数据
最近学习了Echarts的数据可视化展示从官网上看到一些数值是直接手打赋值的，但是一些复杂且数据量庞大的数据再继续用手一个一个敲上去会十分的繁琐，所以如何直接调用数据是一个关键。下面是官网上最简单的一个入门柱状图用它作为演示<!DOCTYPE html><html><head> <meta charset="utf-8"> <title>ECharts</title> <!-- 引入 echar.
2020-09-04 09:34:36
871
1
原创 echarts中国地图js+json数据文件
最近在做一些echarts的可视化需要用到一些省地区的js文件想到也肯定有很多的小伙伴需要这里就分享一下在CSDN里面上传了一个最低需要1C币没办法也弄了1C币急着需要的小伙伴可以去下载直接找我也可以哦但不是时常在回复的可能有点晚些...
2020-06-26 10:01:37
2237
8
原创 Scrapy框架爬取我爱我家二手房信息存储CSV、mysql（IP代理和User-Agent用户代理）
有一段时间没出来活动了闲来无事弄个玩玩O(∩_∩)O哈哈~想必学过Scrapy框架的人都知道如何创建Scrapy和运行，那么我这里呢现将我创的框架展示一下scrapy startproject pachong2(创一个pachong2的文件)cd pachong2 #进入创的文件scrapy genspider aijia wx.5i5j.com #生成名叫aijia的爬虫然后就生成了这些打开我爱我家的首页进入到二手房页面https://wx.5i5j.com/ershoufang下面就开始
2020-06-09 13:13:15
3767
原创 破解安居家数字加密成功爬取
前两天做到爬取租房网站的一个爬虫题目诈一看还挺简单（之前从来没有爬过租房网站）下一刻我就后悔了里面的数字竟然是乱码瞬间不知所措（奔溃边缘徘徊）就是这个东西这是个嘛也没学过类似于这种解码的东东然后就疯狂的找博客（写的是不少，能用的却没几个）最终在昨天寻找到了一篇还算比较靠谱的博客（大神）https://blog.csdn.net/qq_38105596/article/details/90177...
2020-01-17 14:03:18
13485
4
原创 爬取安居客租房数字乱码求解决
弄一下午的爬虫好不容易把数字的乱码解决了却发现里面的数字全部都是假的，大佬们看到能帮我解决一下嘛在线等啊下面是我写的代码import requestsfrom lxml import etreeimport timeimport jsonimport randomimport base64from fontTools.ttLib import TTFontimport refro...
2020-01-14 14:52:18
1104
原创 爬取淘宝python书籍销售情况动态网页
在淘宝中搜索python查看一共显示100页点击下一页时头标的url数值并未改变此时断定这是一个动态网页所有此时我们需要找到它的json数据，在点击下一页的同时查看XHR中的数据变化发现这些便是我们所需要的数据并找到了它循环的规律page所有我们只需用一个for循环就可以将所有的数据得到，再看到pagesize=60得知每页中有60个商品for i in range(0,6000,...
2020-01-13 16:38:50
1524
原创 Echarts数据可视化之Bar
示例来自于Echarts官网：https://www.echartsjs.com/examples/zh/index.html解析柱状图的配值内容<!DOCTYPE html><html lang="en"><head> <meta charset="UTF-8"> <title>柱状图</title>...
2020-01-10 13:48:45
1995
原创 Echarts数据可视化之Line
示例来自于Echarts官网：https://www.echartsjs.com/examples/zh/index.html注释内容学习自：https://blog.csdn.net/luanpeng825485697/category_9269986.html<!DOCTYPE html><html lang="en"><head> <...
2020-01-10 13:22:36
847
原创 爬取新浪存入MySQL
将自己之前学习爬取新浪记录的内容分享一下吧！透过pip安装套件pip install openpyxlpip install pandas -i http://pypi.douban.com/simple --trusted-host pypi.douban.compip install requestspip install BeautifulSoup4pip install ju...
2020-01-07 12:37:38
487
原创 用python创建MySQL
创MySQL之前需要安装pymysql库可以使用 pip install pymysql 直接安装MySQL常用命令1、新增数据opt = "insert into table_name(column1,column2,...,columnN)values(value1,value2,...,valueN)"cursor.execute(opt)2、删除数据opt = "...
2019-12-27 14:03:35
685
原创 用python爬取股票网
找到对应的json文件http://50.push2.eastmoney.com/api/qt/clist/get?cb=jQuery1124002312725213714928_1577232380831&pn=’+str(i)+’&pz=20&po=1&np=1&ut=bd1d9ddb04089700cf9c27f6f7426281&fltt=...
2019-12-27 13:32:05
1623
原创 Python爬取全国大学排名 用pyecharts进行大屏可视化
院校网址：http://college.gaokao.com/schlist/p先找到对应的全部list需要先安装requests,lxml可直接用 pip install requests pip install lxml 命令安装导入需要的相关包import requestsfrom lxml import etreeimport timeimport r...
2019-12-26 16:14:48
6841
13
原创 用python爬取智联招聘
在智联网站上搜索“大数据分析”F12检索网页，找到对应的json抓取URLimport requestsimport pandas as pd #用于显示数据框import time #时间停留url = r'https://fe-api.zhaopin.com/c/i/sou?_v=0.15071971&x-zp-page-request-id=eb7282843f...
2019-12-05 12:42:24
2807
7
原创 用Python爬取51job保存到CSV
#导入相关import requestsfrom lxml import etreeimport csvdef spider(url_):response = requests.get(url_, headers=headers)response.encoding = ‘gbk’return etree.HTML(response.text)#获取网页内容def download...
2019-11-26 13:38:00
1564
1
SecureCRT (Linux Shell客户端).rar
2019-12-04
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人