Xpath
Xiaoyeforever
这个作者很懒,什么都没留下…
展开
-
(六)Python爬虫------使用Scrapy库简单爬取天气网城市天气预报信息,并使用MySQL数据库保存数据
一、使用Scrapy库做爬虫项目,前提是已经安装好了Scrapy库,没有没有安装,请查看我前几天的Scrapy库pip离线安装方法。 1.在使用Scrapy开发爬虫时,通常需要创建一个Scrapy项目。通过如下命令即可创建 Scrapy 项目: scrapy startproject PythonScrapyWeather (PythonScrapyWea...原创 2020-01-13 04:22:45 · 2607 阅读 · 0 评论 -
(五)基于Python面向对象使用自动化工具Selenium+Xpath爬取京东商品(手机)列表
一、准备工作 1.安装selenium类库:2种方法可供选择 (1)提前条件是已经安装好了Python,直接进入cmd命令行,输入python -m pip install selenium指令,就可以自动安装selenium (2)或者已经安装好了pip,直接进入cmd命令行,输入pip install selenium,就可以自动安装selenium 2.检查Selenium是否安装成...原创 2020-01-07 03:25:30 · 651 阅读 · 0 评论 -
(三)python(基于面向对象)使用Requests+Xpath提取HTML内容(妹子网MM图片)
xpath获取标签对本身含内容, 获取html内容 之前一直使用BeautifulSoup(bs4)HTML标签内容,但是后面通过使用对比,当我们使用 html.parser 作为解析器时,BeautifulSoup 解析的耗时平均是 Xpath 的 1.8 倍+;当我们使用 lxml 作为解析器时,BeautifulSoup 解析的耗时虽有减少,但平均仍是 Xpath 的 1.5...原创 2019-12-28 03:09:58 · 714 阅读 · 0 评论