Walker990的博客

段子爬取这次解析使用的reimport requestsimport reclass Spider: def __init__(self): self.page = 1 self.switch = True def getConnect(self): """ 获取html,使用re库解析出想要的内容 ...

爬取的是美女贴吧中的图片代码如下：import requestsfrom lxml import etreeimport urllibclass Tieba: def __init__(self, name, start_page, end_page): self.headers = {"User-Agent": "Mozilla/5.0"} s...

泰国旅游信息爬取# _*_ coding:utf-8 _*_ import requestsfrom lxml import etreeimport jsonclass BangkokTravel: """ 爬取取曼谷旅游的信息 """ def __init__(self): pass def getPage(self): ...

1.打开Anaconda prompt然后, 输入：conda list 查看是否已经有scrapy，前提把anaconda配置到环境变量里例如：我的环境变量：2.查看没有scrapy,执行conda install scrapy安装scrapy安装时：在Anaconda prompt 执行conda install scrapy安装scrapy后，回到第一步，查看如果需要更新A...