yanqianglifei的专栏

这几天终于忙完毕设和学校的事情，终于有时间来写Python了（(￣▽￣)~*）。前些天在群里看到有人讨论这个360美女图库的爬取。自己今天也尝试下（蛮简单）。因为这个网站是下拉到底底部，图片就会加载进来，所以自己想用Seleniu+PhantomJS来做，后来分享doc源代码并没有我们想要的图片信息，后来发现是js请求的数据，找到数据请求的地址，自己发现每次，下拉都会加载30张图片，所以自己将

接下来自己会写一些关于爬虫 实战的内容，把所学的知识加以运用。这篇文章是关于一个英文谚语网站的谚语爬取，并输出结果。这个网站大致有10页谚语，所以是一个关于selenium使用的例子，大致思路使用webrdriver获取“下一页”按钮，获取每一页源码，输入所要的谚语使用到的模块或工具（这些要提前准备好）：1、 BeautifulSoup2、selenium 3、time4、driver

斗图我不怕最近看了Python多线程的相关内容，并且前几天观看了腾讯课堂潭州学院上面的关于斗图网爬取的公开课，课程内容大致是利用Python多线程爬取斗图（多页），并将图片保存到本地。自己写这篇文章总结下这个项目的所涉及的知识，并将实现过程分享给大家。首先：分析网站，找到图片的src地址打开网址：https://www.doutula.com/a

最近，为了提取裁判文书网的有关信息，自己迈入Python的学习之路，写了快两周的代码，自己写这篇文章总结下踩过的坑，还有遇到一些好的资料和博客等总结下，以便自己后期复习和参考和、分享给大家交流学习，也欢迎大家补充些精彩内容。一、环境搭建和工具准备1、为了省去时间投入学习，推荐直接安装集成环境 Anaconda2、IDE：Pycharm、Pydev3、工具：Jup