爬虫实战之爬取百度贴吧

今天的爬虫实战是爬取百度贴吧
爬虫五部曲，目标链接，分析网页，发起请求，解析，保存

kw后面就是我们输入要进入的贴吧，pn就是翻页的值

在这里我们本次目的是把整个网页拿下来，我们就不用xpath了
直接上菜

from urllib import request,parse
import time
import random
#创建类
class Baidutieba(object):

    def __init__(self):
        '''基本常量'''
        self.url = "https://tieba.baidu.com/f?kw={}&pn={}"
        self.headers