xpath不能正常匹配

     记录一下今天掉的坑。。。本来再写爬虫的时候发现xpath能在浏览器里正常使用，但是放到我的项目里就是一个空列表。弄了我将近一个小时。解决方案有两种：

1. 第一种就是携带cookie值。

self.headers = {
            "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.109 Safari/537.36",
            "cookie":"在浏览器中的headers下面复制一个"
        }


然后在访问的时候携带headers就行
response = requests.get(self.start_url, self.headers)

1. 第2种解决方法就是使用selenium

   browser = webdriver.Chrome()
   browser.get(details_url)
   html = browser.page_source
   html = etree.HTML(html)
   img = html.xpath('//a/@href')  #然后就可以正常的匹配了