
【scrapy爬取不到tbody的问题以及保存数据为json格式】
scrapy用xpath爬取不到tbody的问题这是因为tbody是Firefox和Chrome等浏览器自动添加的标记。但是当使用Scrapy进行抓取时,tbody不在responseHTML中。所以我们只要把xpath里的tbody删除即可正常爬取的数据顺便写点scrapy的经验吧, 进入循环的xpath语句记得前面没有/这些东西, 直接按节点走,例如:第一个for循环是对末尾的div数组进行遍历, 然后第二层循环是对div数组里的div[2]/div/div[]数组进行遍历, 注意xpat








