python3爬虫攻略(1):urllib.request使用(1)

使用urlopren()分分钟拔下一个网页

例子

# -*- coding:utf-8 -*-
#导入request
from urllib import request
#打开网页
response=request.urlopen("http://www.umei.cc/meinvtupian/xingganmeinv/")
html=response.read().deconde("utf-8")
print(html)

直接用urllib.request模块的urlopen()获取页面数据格式为bytes类型,需要decode()解码,转换成str类型。

urlopen返回对象提供方法:

-         read() , readline() ,readlines() , fileno() , close() :对HTTPResponse类型数据进行操作

-         info():返回HTTPMessage对象,表示远程服务器返回的头信息

-         getcode():返回Http状态码。如果是http请求,200请求成功完成;404网址未找到

-         geturl():返回请求的url


使用urlretrieve()分分钟下载图片

比如我们要下载这个网页里面的这张图片


将鼠标放到图片上,点击右键审查元素,得到图片的url地址




# -*- coding:utf-8 -*-
from urllib import request
#图片url地址
imgurl="http://i1.umei.cc/uploads/tu/201709/9999/62bb166433.jpg"
request.urlretrieve(imgurl,filename="美女.jpg")
urlretrieve函数需要传入两个参数,一个是图片的url,一个是文件保存的路径,二是设置局对路径例如(D:\xxxx\xxxx\xxx.jpg)如果不设置就默认保存在python文件执行的路径下



最简单的爬虫就是这样的啦!

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值