主要内容:Python中的两个库的使用。
1、requests库:访问和获取网页内容,
2、beautifulsoup4库:解析网页内容。
一 python 爬取数据
1 使用requests库发送GET请求,并使用text属性获取网页内容。
然后可以对获取的网页内容进行解析和处理
import requests
url = "https://www.baidu.com"
response = requests.get(url)
html_content = response.text
print(html