跟着大佬学爬虫===爬虫进阶

第一课(20181212-20181214):网址:http://www.meizitu.com/a/more_1.html

这个第一天真的是耽搁了好长时间,老是各种事情耽搁。。。喝酒。。。聚会。。。开会。。。各种琐事。。。

今天继续20181212,双十二,妹子图网站,有时能打开有时打不开。。。

抗了2天,终于实践完成,图片列表获取的url一直在变,需要注意。。。

第二课(20181214-):网址:http://www.moko.cc/

由于美空网挂了,这个后续在进行下一部分操作和分析

第三课(20181214):网址:http://www.27270.com

因为网站反爬,所以引入retrying(retrying是一个很好用的关于重试的Python包,可以用来自动重试一些可能会运行失败的程序段。)貌似pip3自带。。。。

生产者和消费者的思路必须还得是 生产者加入队列后阻塞线程,然后等到有东西了才开始消费。。。。

第四课(20181214):网址:


 

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值