【开发环境配置】【Python爬虫】请求库的安装

requests的安装

1.pip安装

无论是Windows、Linux还是Mac,都可以通过pip这个包管理工具来安装。在命令行界面中运行如下命令,即可完成requests库的安装:

pip3 install requests

这是最简单的安装方式,推荐使用这种方法安装。

2. 验证是否安装成功

打开命令行工具cmd,进入Python环境,输入import requests,没有报错则说明安装成功。

selenium的安装

Selenium是一个自动化测试工具,利用它我们可以驱动浏览器执行特定的动作,如点击、下拉等操作。对于一些JavaScript渲染的页面来说,这种抓取方式非常有效。

下面我们来看看selenium的安装过程。

1.pip安装

pip3 install selenium

2.验证是否安装成功

方法与安装requests库时的验证方法一样,打开cmd输入python,然后继续输入import selenium,没报错则说明安装成功。
如图

ChromeDriver的安装

前面我们成功安装好了selenium库,但是它是一个自动化测试工具,需要浏览器来配合使用,本节中我们就介绍一下ChromeDriver驱动的配置。
首先,下载Chrome浏览器。
随后安装ChromeDriver。只有安装ChromeDriver,才能驱动Chrome浏览器完成相应的操作。接下来,我们来安装ChromeDriver。

1.下载链接

官方网站

下载地址

2.查看Chrome浏览器版本

Chrome版本
这里我的Chrome版本是90.0。记住你们的Chrome版本号,因为选择ChromeDriver版本时需要用到。

3.下载ChromeDriver

打开ChromeDriver的官方网站,选择对应的版本号进行下载。
在这里插入图片描述

4.环境变量配置

下载完成后,将ChromeDriver的可执行文件配置到环境变量下。
在Windows下,建议直接将ChromeDriver.exe文件拖到Python的script目录下,如图所示。
在这里插入图片描述

5.验证安装

配置完成后,就可以在命令行下直接执行ChromeDriver命令了:
chromedriver
如果控制台有类似如下图所示的输出,则说明ChromeDriver的环境变量配置好了。
在这里插入图片描述
随后再在程序中测试。执行如下Python代码:

from selenium import webdriver

driver = webdriver.Chrome()
driver.get("https://www.baidu.com")

driver.find_element_by_id("kw").send_keys("selenium")
driver.find_element_by_id("su").click()

运行之后,如果弹出一个空白的Chrome浏览器,则说明所有的配置都没有问题。如果出现闪退情况,可能是ChromeDriver版本与浏览器版本不兼容,请更换ChromeDriver版本。
在这里插入图片描述

评论 6
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值