urllib基本使用
使用urllib来获取百度首页源代码
import urllib.request
# 定义一个url 你需要访问的网址
url = "http://www.baidu.com"
# 模拟浏览器向服务器发送请求 response = 响应
response = urllib.request.urlopen(url)
# 获取响应种的页面的源码 content = 内容
# read方法 返回的是字节形式的二进制数据
# 二进制--》字符串 解码 decode("编码类型")
content = response.read().decode("utf-8")
print(content)
urllib一个类型六个方法
一个类型
import urllib.request
url = "http://www.baidu.com"
response = urllib.request.urlopen(url)
print(type(response))
# response是HTTPResponse的类型
六个方法
read() | readline | readlines | getcode | geturl | getheadres |
一字节一字节读取 | 读取一行 | 一行一行读取直至读取完 | 返回状态(200)为正常 | 返的回url | 获取状态信息 |
import urllib.request
url = "http://www.baidu.com"
response = urllib.request.urlopen(url)
# content = response.read()
# content = response.read(5)
# content = response.readline
# content = response.readlines()
# print(content)
# print(response.getcode())
# print(response.geturl)
print(response.getheaders)