入门爬虫(一)最简单的url爬取

之前虽然一直又想学爬虫的想法,但是一直没能付诸行动。

怎么说呢,假如20岁不会一样东西的话,二十一岁也不一定会,还有二十二,二十三……

反正下班后牺牲一些娱乐时间学点东西,总是不会错的。

 

第一次接触python,之前一直搞java的,快速的入了个门,参考教程写了一个最简单的爬虫。

 

#爬取一个豆瓣首页 原urllib2,现在python3是urllib.request
import urllib.request

#网址
url = "http://www.douban.com/"

#请求
request=urllib.request.Request(url)

#爬取结果 urlopen():打开一个url,可以传url或者request
response =urllib.request.urlopen(request)

#对象的读操作,类似的文件对象的读操作.
data = response.read()

#设置解码形式
data = data.decode('utf-8')

# 打印结果
print(data)

# 打印爬取网页的各类信息



print(type(response))
print(response.geturl())
print(response.info())
print(response.getcode())

 

每天进步一点吧。

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值