dmeiding的博客

原创 python爬虫实现——爬取糗事百科的段子

一、python爬虫综述一个简单的爬虫，两部分组成，下载html和解析html文档。我实现了一个爬取糗事百科的首页的笑话的网络爬虫，大家可以用来参考。二、python爬虫开发环境的搭建开发环境：python2.7(win10-64)开发IDE：pycharm三、爬虫的基本工作流程及框架：1.获取url2.用对应的url下载对应的html文件3.设置条件从html文件中获取要抓取的东西四、开始爬取设...