python写网络爬虫编程环境设置

1 安装python 3.10.4

Download Python | Python.org

2 安装pycharm IDE

https://www.jb51.net/softs/598504.html#downintro2

https://www.jb51.net/softjc/754335.html----破解激活，这一步一直没成功； 30天免费倒是有了

3 pycharm怎么配置python环境

新手学习Python编程，手把手教你安装配置Python和Pycharm环境

4 安装第三方库，requests

pip install requests --- cmd窗口

Python 安装 第三方库的安装技巧_风起云涌2021的博客-CSDN博客 --import requests 安装成功

模拟发送http请求

5 安装第三方库，beautifulsoup4

pip install beautifulsoup4

对response内容进行按照html格式解析

6 安装第三方库，lxml

pip3 install lxml

8 安装Chrome浏览器

浏览器电脑版下载，浏览器中文版下载

使用其开发者环境

9 了解Chrome的开发者模式

Chrome开发者工具使用教程

10 json

网站前台与后台之间的数据交互，轻量级的数据交互方式

爬虫入门（六）数据提取之json_沐籽丶的博客-CSDN博客_json爬虫

11 正则表达式

爬虫入门（六）数据提取之json_沐籽丶的博客-CSDN博客_json爬虫

arry["abc"]是完整匹配的字符串

12 python数据结构

字典--key-value对；

Python3 数据结构 | 菜鸟教程