正则

        for x in div_a:
            url = re.compile('href="(.*?)"',re.S)
            print(url.findall(x)[0])

 

xpath 就按照标签一步一步往下 // 就是全局查找 class 和id 都是一样弄
        # next_page_url = response.xpath('//div[@class="ui pagination menu"]/a[last()]' ).extract()
        # next_page_url = response.xpath('//div[@class="ui pagination menu"]/a[1]' ).extract()#a的【】只能正着写 比如 12345 不能写成-1 -2-3-4，最后一个可以写成last（）