Xpath
baidu_252253
这个作者很懒,什么都没留下…
展开
-
火狐浏览器中firebug和firepath的安装
原创 2018-02-28 19:27:37 · 7226 阅读 · 2 评论 -
xpath解析使用extract()的各种情况分析
返回一个SelectorList 对象 http://scrapy-chs.readthedocs.io/zh_CN/0.24/topics/selectors.html#selectorlistSelectorList 类是内建 list 类的子类,提供了一些额外的方法:xpath(query)css(query)extract()re()__nonzero__()返回一个list(就...转载 2018-03-03 21:41:49 · 1139 阅读 · 0 评论 -
Scrapy框架中利用xpath解析网页时出现的几种错误
1.网页源代码与用‘’inspect in firepath ”看到的网页标签不一样,造成拿到的数据为空或者报“IndexError: list index out of range”的错误 (1)inspect in firepath看到的源代码 ( 2)网页源码 (1)和(2)经过对比可以看出:(2)中<a>标签少了,只有</a&...原创 2018-03-04 21:48:29 · 4287 阅读 · 0 评论 -
xpath详解
#!/usr/bin/env python# -*- coding:utf-8 -*-"""1. 网页的解析方式1) xpath(简单)2) 正则(最难)3) css(需要懂网页的css)4) bs4(比xpath难一点点)2. xpath的基本用法1) 环境准备: 火狐浏览器(版本49.0以下) firebug firexpath2) 基本操作//元素标签名例如: //div,...原创 2018-03-24 10:34:33 · 30408 阅读 · 4 评论 -
Json模块dumps、loads、dump、load函数介绍
https://blog.csdn.net/mr_evanchen/article/details/77879967原创 2018-06-03 20:51:04 · 264 阅读 · 0 评论 -
xpath、正则、bs4三种爬取数据的方式的对比
https://www.jianshu.com/p/b52b7ad15a4e原创 2018-06-25 09:50:36 · 4391 阅读 · 3 评论