爬虫之哔哩哔哩女神篇

• 版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/kun1280437633/article/details/80503625

# -*- coding: utf-8 -*-
import re
import requests
'''
    分析：
    1. 爬取流程
    地址：https://search.bilibili.com/all?keyword=女神篇&from_source=banner_search&page=39
    方式：get
    参数：
        keyword: 女神篇
        from_source: banner_search
        page: 39
'''

class BiliSpider:
    def __init__(self):
        self.base_url = "https://search.bilibili.com/all"
        self.info = {}
    def run(self):
        headers = {
            'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/66.0.3359.181 Safari/537.36',
            'Cookie':'LIVE_BU