爬虫常用模块--urllib爬虫[头歌题解]

题目来源：头歌平台------数据采集与网络爬虫
下述题解均通过测试，如果小伙伴有出现测试不通过的情况，大概是原题出现变化或是编码时出现漏缺，答案仅供参考，祝大家一通百通。

第1关：urllib基础

import urllib.request
def request(url):
    '''
    一个参数
    :param url:请求网址
    :return:返回一个请求的字符串。编码为utf-8
    '''
    # *************** Begin *************** #
    response = urllib.request.urlopen(url)
    result = response.read().decode('utf-8')
    return result;
    
    # *************** End ***************** #

第二关：urllib进阶

import urllib.request
import http.cookiejar
def request(url,headers):
    '''
    两个参数
    :param url:统一资源定位符,请求网址
    :param headers:请求头
    :return:html
    '''
    
    # ***************** Begin ******************** #

    cookie = http.cookiejar.CookieJar()
    headers = urllib.request.HTTPCookieProcessor(cookie) 
    opener = urllib.request.build_opener(headers)
    r = opener.open(url)

    # ***************** End ******************** #
    html = r.read().decode('utf-8')
    return html