2018年12月_zone7_

原创爬取两万多数据，告诉你广州房租价格现状（4）

爬虫利器初体验（1）听说你的爬虫又被封了？（2）爬取数据不保存，就是耍流氓（3）爬取两万多租房数据，告诉你广州房租现状（4） scrapy 也能爬取妹子图？（5）概述前言统计结果爬虫代码实现爬虫分析实现后记前言八月份的时候，由于脑洞大开，决定用 python 爬虫爬取了深圳的租房数据，并写了文章《用Python告诉你深圳房租有多高》，文章得到了一致好评和众多转载。由于我本...

2018-12-25 09:31:41 1013

原创爬取数据不保存，就是耍流氓（3）

爬虫利器初体验（1）听说你的爬虫又被封了？（2）爬取数据不保存，就是耍流氓（3）爬取两万多租房数据，告诉你广州房租现状（4） scrapy 也能爬取妹子图？（5）目录前言 Items Pipelines 瞎比比前言 OK，通过签名两篇文章《爬虫利器初体验（1）》《听说你的爬虫又被封了？（2）》，我们初体验也过了，爬虫代码健壮性也升级为 PLUS 了。都分析到这个地步了，是不是感觉还...

2018-12-25 09:31:18 390

原创 scrapy爬虫进阶解析（2）

爬虫利器初体验（1）听说你的爬虫又被封了？（2）爬取数据不保存，就是耍流氓（3）爬取两万多租房数据，告诉你广州房租现状（4） scrapy 也能爬取妹子图？（5）目录前言 Spider Middleware 瞎比比前言上一篇文章《爬虫利器初体验（1）》中，我们举了个简单的栗子，但是在真实的开发中这样的爬虫代码很容易就会被封掉。那么怎么样才能避免这些事发生呢？这一这篇文章我们一起来...

2018-12-25 09:30:21 299

原创 scrapy 爬虫初体验(1)

爬虫利器初体验（1）听说你的爬虫又被封了？（2）爬取数据不保存，就是耍流氓（3）爬取两万多租房数据，告诉你广州房租现状（4） scrapy 也能爬取妹子图？（5）目录前言 scrapy 数据流 scrapy 组件爬取豆瓣电影 Top250 后记送书后话前言为什么要学 scrapy 呢？看下图，就清楚了。很多招聘要求都有 scrapy，主要是因为 scrapy 确实很强。那到底...

2018-12-25 09:29:34 322

原创 Python 数据库骚操作 -- MySQL

送书福利，送十本 Python 类书籍目录前言 MySQL GUI 工具 MySQL 遇上 Docker 增删改查一对多一对一多对多后记前言今天这篇是三大数据库的结尾篇，前面两篇分别是：《Python 数据库骚操作 – MongoDB》《Python 数据库骚操作 – Redis》，这篇主要介绍 MySQL 的 orm 库 SQLAlchemy 。那什么是 orm 呢？Obje...

2018-12-25 09:26:16 311

原创 Python 数据库骚操作 -- Redis

送书福利，送十本 Python 类书籍目录前言 Redis GUI 工具 Redis 遇上 Docker Redis string Redis hash Redis list Redis set Redis zset 后记前言前面一篇文章介绍了 MongoDB 的库，我把 MySQL 放在了最后面，这篇文章继续介绍 Redis 的操作。Redis支持五种数据类型：string（字符串）...

2018-12-25 09:25:09 284

原创 Python 数据库骚操作 -- MongoDB

前言 MongoDB GUI 工具 PyMongo（同步） Motor（异步）后记前言最近这几天准备介绍一下 Python 与三大数据库的使用，这是第一篇，首先来介绍 MongoDB 吧，，走起！！ MongoDB GUI 工具首先介绍一款 MongoDB 的 GUI 工具 Robo 3T，初学 MongoDB 用这个来查看数据真的很爽。可以即时看到数据的增删改查，不用操作命令行来查看...

2018-12-25 09:24:35 206

原创第二期送书活动中奖名单

第二期的活动圆满结束啦，最近活动很多，大家尽情享受福利，通过留言板，我知道了还有那么多读者朋友莫默默地支持我。我的文章也帮到了不少朋友，这让我很开心，也是我继续前进的动力，因为我希望能够...

2018-12-11 08:00:00 123

原创爬取两万多租房数据，告诉你广州房租现状（4）

概述前言统计结果爬虫代码实现爬虫分析实现后记前言建议在看这篇文章之前，请看完这三篇文章，因为本文是依赖于前三篇文章的：爬虫利器初体验（1）听说你的爬虫又被封了？（2）爬取数据不保存，就是...

2018-12-10 09:08:10 277

原创推荐几款爬虫分析神器

Toggle JavaScript这款工具之前推荐过，这里就再推荐一次，凑个数吧。这是一款禁止异步加载的 Chrome 工具。就拿 QQ 音乐为例子，打开 Toggle JavaScri...

2018-12-04 08:33:00 153

zone_的博客