python爬虫笔记_01

1、常用库

1.1、requests

requests 库是 Python 的一个第三方库。

安装 Python3 ，可直接使用 pip3安装requests 库：

pip3 install requests

 

1.2、Beautiful Soup（bs4）

Beautiful Soup 库一般被称为bs4库，支持Python3，是写爬虫非常好的第三方库。

可直接使用 pip在命令行进行安装：

pip install beautifulsoup4

1.3、re

re 模块使 Python 语言拥有全部的正则表达式功能。compile 函数根据一个模式字符串和可选的标志参数生成一个正则表达式对象。该对象拥有一系列方法用于正则表达式匹配和替换。

1.4、pandas

Pandas 是 Python 语言的一个扩展程序库，用于数据分析。

Pandas 提供高性能、易于使用的数据结构和数据分析工具。一个强大的分析结构化数据的工具集，基础是 Numpy（提供高性能的矩阵运算）。

Pandas 可以从各种文件格式比如 CSV、JSON、SQL、Microsoft Excel 导入数据。