最简单的爬虫练习:爬取百度页面的基本信息

爬取一个简单的网页,我用到的是urlopen函数
格式为：urlopen(url)
其中url为想要爬取的页面地址

# 最简单的爬虫练习:爬取百度页面的基本信息

# 从urllib的request模块中导入urlopen函数
from urllib.request import urlopen
# 想要爬取的网页地址
url = "http://www.baidu.com"
# 用函数urlopen获取信息并传递给变量response
response = urlopen(url)
#读取全部内容
allcontent = response.read()
# 返回实际数据的url,防止重定向
trueurl = response.geturl()
print(trueurl)
# 返回服务器响应的HTTP报头
header = response.info()
print(header)

今日份学习笔记，如果有帮忙，不妨留下一个赞吧！