python爬虫基本篇

导入请求库
import requests
明确请求数据：
url="" 自己要请求的链接

#请求发送 模拟用户请求数据

headers = {
    # 假装自己是浏览器
    'User-Agent': ' Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/71.0.3578.98 Safari/537.36',
}

#请求
req = requests.get(url, headers=header)

通过打印，打印出网站信息

 

二、通过规律找到你要用的数据、

如： 通过class 等方式进行xpath