Python爬虫关于urllib.request详细举例演示

import urllib.request

# 解析一个网页  获取一个get请求
response = urllib.request.urlopen('http://www.baidu.com')  # 把获取的数据返回
print(response.read().decode('utf-8'))  # decode防止乱码所以解码

# www.httpbin.org 专门用来测试的一个网址 当你向他发送请求是他会告诉你他会给你一些什么样的相应
# 来测试你的请求是不是得到了你预期的响应

# 获取一个post请求(必须有一个服务器端获取请求的相应)网上模拟用户真实登录
import urllib.parse  # 解析器(不管键值对是英文还是中文解析按着一定格式如UTF-8)

data = bytes(urllib.parse.urlencode({'hello': 'world'}), encoding='utf-8')  # 以后可能放cookie用户信息
response = urllib.request.urlopen('http://httpbin.org/post', data=data)  # data作为post里的内容可以直接返回进去
print(response.read().decode('utf-8'))

出于保密,就展示部分效果图(见谅)
在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值