01 python爬虫环境准备

本文档介绍了如何搭建Python爬虫环境,包括Python环境安装、PyCharm配置、requests和lxml库的安装,以及使用Chrome的抓包工具和XPath助手辅助网页解析。确保在信息技术领域进行网络数据抓取前,具备必要的基础设置。
摘要由CSDN通过智能技术生成

欲善其事,必先利其器

基本环境安装

1.python环境安装和PyCharm编译工具(略)

可以自行百度安装,太基础不做教程

2.导入request库和LXML

1.安装requests

pip install requests

# 上面指令如果安装失败,可以尝试下面命令
pip install requests -i http://pypi.douban.com/simple --trusted-host pypi.douban.com

2.安装lxml库

pip install lxml

# 上面指令如果安装失败,可以尝试下面命令
pip install lxml -i http://pypi.douban.com/simple --trusted-host pypi.douban.com

3.安装抓包工具,这里用谷歌浏览器(省略)

需要安装包的

链接:https://pan.baidu.com/s/1WLjsBNtrwuxjIGsjVbonYQ 
提取码:6666

4.安装网页解析工具(谷歌插件)

1、下载插件:xpath-helper

链接:https://pan.baidu.com/s/1aOI6z3Myu15SGyNoqOsFOw 
提取码:6666

2、解压xpath-helper

3、在Chrome中访问 chrome://extensions/ ,打开开发者模式(开关按钮推动到右边)

 4、然后点击加载已解压的扩展程序

 

5、安装效果如下

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值