Python
文章平均质量分 79
墨回首
这个作者很懒,什么都没留下…
展开
-
Python爬虫随笔1
起因问答网站做到现在,没有数据啊,所以需要一些数据;爬虫很好玩,早就在知乎看见别人爬各种羞羞网站的代码,不过一直没时间,最近感觉自己秋招也没啥希望,还是做点自己想做的事情吧;我的Python基础几乎为0,虽然看过语法,然而都忘了,这玩意不写,两天就忘了;所以给点动力,也可以好好工作一把;爬虫1.一直听说爬虫,其实并不是什么厉害的东西;在B/S架构下,所有数据都是要传输到我们客户端上的,也就是原创 2017-09-07 22:21:04 · 305 阅读 · 0 评论 -
python 爬虫随笔2
前言这并没有写完思路实在没事做,就写了一个爬虫,主要是爬去我校pt站的图片,用以积累;以后就可以爬其他图站嘞;实践了爬虫的基本思想;写pyspider的时候,也是这种很明显的思路 一个入口url,比如导航页之类的,然后从这个页面获取其他的url到最终的详情页,我们爬取数据;我们使用集合储存链接,然后让线程一直跑,这样的话,一有新的内容就可以得到,然后我们也就可以发邮件啊什么的通知自己了原创 2017-09-24 21:10:26 · 387 阅读 · 0 评论 -
python爬虫随笔3 妹子图爬虫
前言其实最早知道python爬虫就是知乎接触的妹子图爬虫,这次等于是自己写的;很多类库都是自己喜欢那个就用那个了;思路首先我们需要一个导航页,然后找到我们需要的类似于列表之类的,然后得到链接集合 #通过主页导航,获取链接集合def getPicture(): url = "http://www.mmjpg.com/tag/meixiong" r = requests.get(原创 2017-09-26 21:42:56 · 738 阅读 · 0 评论