三.1.Urllib简介

Python3的Urllib模块整合了Python2中Urllib和Urllib2的功能,包括urllib.request用于HTTP请求,urllib.error处理网络请求异常,urllib.parse解析URL,以及urllib.robotparser解析robots.txt。这个模块为网络爬虫和自动化数据获取提供了基础支持。
摘要由CSDN通过智能技术生成

Urllib简介

  在python2中,有Urllib和Urllib2两种模块,都是用来实现网络请求的发送功能。其中Urllib2可以接收一个Request对象,用来设置URL的Headers,而Urllib则只能接受一个URL,不能伪装用户等操作。而python3中的Urllib将这两个模块的功能结合,具体功能如下:
  urllib.request:用于实现基本HTTP请求的模块。
  urllib.error:异常处理模块,如果在发送网络请求时出现了错误,可以捕获异常,然后惊醒下一步操作,例如输出error类型,或者跳过error继续执行程序等等操作。
  urllib.parse:用于解析url的模块。
  urllib.robotparser:用于解析robots.txt文件,判断网站是否可以爬取信息。
  这就是urllib模块的大致内容。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值