这里是固定cookie设置方法、
在settings.py里面添加这个
里面的数据直接去网站获取
DEFAULT_COOKIE={
# 在这里,有多少个等号就有多少个键值对
'key':'value'
}
然后回到爬虫项目里面先导入
from …settings import DEFAULT_COOKIE
然后在request的时候参数里面加一个cookies=DEFAULT_COOKIE
这样就是携带cookies进行访问
注意! ! ! ! ! ! !
如果是一开始就要进行cookie访问,那么就需要在一开始就重写scrapy的方法
def start_request():
yieId scrapy.Request(url,cookies=DEFAULT_COOKIE)