页面展示【智联招聘】:
URL:https://sou.zhaopin.com/?jl=801&kw={0}&p={1}
例:https://sou.zhaopin.com/?jl=801&kw=python&p=1
右键–>查看网页源码【切片处理获得json数据】
json数据获取要用的数据【一一相对应】
在列表页函数中解析:
def parse(self, response):
js = response.xpath('//script[contains(.,"__INITIAL_STATE__=")]/text()').extract_first() #利用xpath获取<script>标签
# print(js)