如图:利用xpath解析结果: imgs_href = response.xpath('//div[@class="box picblock col3 masonry-brick"]/div/a')
如上图:网页源代码中解析结果: imgs_href = response.xpath('//div[@class="box picblock col3"]/div/a')
总结:当解析网页时,不能仅仅靠xpath或者网页源代码找,他们都可能会出错。之前在用selenium爬取淘宝上商品信息时,
在xpath上能找到的元素,而且在程序中能正常运行,在网页源代码中却找不到。