Requests 库的基本使用

最新推荐文章于 2023-12-20 15:49:07 发布
最新推荐文章于 2023-12-20 15:49:07 发布
阅读量176 收藏
点赞数
分类专栏： spider_learning 文章标签： 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_38480908/article/details/107687042
版权

Requests 库的基本使用

使用get方法发送请求 ( 若网页为post请求，则将get改为post即可 )

1、导入requests包

import requests

#有时候还需要传递data参数

例如：data = {
“first”: “true”,
“pn”: 1,
“kd”: “python”
}

2、构造请求头

headers = {
    "User-Agent":"Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36",
    "Referer":"https://baike.baidu.com/item/%E7%99%BE%E5%BA%A6%E6%96%87%E5%BA%93/4928294?fr=aladdin"
}

3、传递请求参数

response = requests.get("https://baike.baidu.com/item/%E4%B8%AD%E5%9B%BD%E5%9C%B0%E8%B4%A8%E5%A4%A7%E5%AD%A6%EF%BC%88%E6%AD%A6%E6%B1%89%EF%BC%89/9272346?fromtitle=%E4%B8%AD%E5%9B%BD%E5%9C%B0%E8%B4%A8%E5%A4%A7%E5%AD%A6&fromid=249083",headers=headers)

4、打印查看相关输出信息

print(response.text)

<!DOCTYPE html>
<!--STATUS OK-->
<html>



<head>
<meta charset="UTF-8">
<meta http-equiv="X-UA-Compatible" content="IE=Edge" />
<meta name="referrer" content="always" />
<meta name="description" content="中国地质大学，简称地大，位于武汉市，是中华人民共和国教育部直属全国重点大学，是国家“世界一流学科建设高校”，国家“211工程”、“985工程优势学科创新平台”建设高校，是国家批准设立研究生院的大学，入选国家“111计划”、卓越工程师教育培养计划、国家建设高水平大学公派研究生项目、中国政府奖学金来华留学生接收院校、首批高等学校科技成果转化和技术转移基地，高水平行业特色大学优质资源共享联盟、地球科学国...">

5、将爬取信息写入文件，保存在本地

with open("result.txt","w",encoding="utf-8") as fp:
    fp.write(response.text)
    fp.close()
Havertz_2024
关注
专栏目录
requests库的使用（一篇就够了）
m0_67401761的博客
07-28 1623
urllib库使用繁琐，比如处理网页验证和Cookies时，需要编写Opener和Handler来处理。为了更加方便的实现这些操作，就有了更为强大的requests库。
Request库用法总结
最新发布
QQVQQ的博客
08-18 686
requests 库是一个功能强大且易于使用的 Python HTTP 库，广泛用于发起 HTTP 请求。本文从基础到高级功能，详细介绍了如何使用 requests 进行各种类型的 HTTP 请求、处理请求参数等用法。
requests库的基本用法
sun的博客
09-29 3903
简介 主要介绍requests的post和get请求方式，这两种方式使用的最多。 get请求 import requests url='http://www.baidu.com' p=requests.get(url) print(p.text) 这是最基本的请求方式 使用requests.get返回一个请求的对象，然后将这个请求对象的返回的文本内容输出（输出的是我们正常访问页面的源码）。 当...
requests库基本用法
随风的博客
03-16 393
Python requests库基本用法
Request库的使用
small-white的博客
05-07 616
Request库：封装了自动爬取HTML页面，自动网络请求提交的方法的库 Request库的7个主要方法： requests.request()：构造一个请求，是一下个方法的基础 requests.get()：获取HTML网页的主要方法，对应于HTTP的GET requests.head()：获取HTML网页头部信息的方法，对应HTML的HEAD requests.post()：向HTM...
课时09：Requests库基本使用.rar
03-01
Python3 爬虫实战Python3 爬虫实战Python3 爬虫实战Python3 爬虫实战Python3 爬虫实战Python3 爬虫实战Python3 爬虫实战Python3 爬虫实战Python3 爬虫实战
【爬虫入门】day2 爬虫requests库基本使用和正则表达式
qq_33749437的博客
10-12 422
Requests库的基本使用 正则表达式基础
requests库的基本用法.docx
08-08
Requests 库的基本用法 Requests 库是 Python 中的一个 HTTP 客户端库，允许用户发送 HTTP 请求并获取响应。在自动化学习和测试工程师领域中，Requests 库是一个非常重要的工具。 Requests 库的安装 ------------...
Python Requests库基本用法示例
09-20
首先，要使用Python Requests库，需要先进行安装。安装非常简单，通常只需要使用pip这个Python的包管理工具即可完成。在命令行中输入`pip install requests`，就可以轻松安装这个库。 安装完成后，我们就可以开始...
Python：Requests库的使用
衍生星球的博客
04-21 6091
requests库是一个简洁且简单的处理HTTP请求的第三方库，它的最大优点是程序编写过程更接近正常URL访问过程。这个库建立在Python 语言的 urllib3库的基础上，类似这种在其他函数库之上再封装功能、提供更友好函数的方式在Python语言中十分常见。在Python生态圈里，任何人都有通过技术创新或体验创新发表意见和展示才华的机会。
requests库基本操作
我的博客
05-14 269
环境 Pycharm v2020.1.EAP + Python v3.8.2 + requests v2.23.0 requests库包含的方法 本质上看，requests库仅有一个request()方法，其余均是此方法的变化形式，主要为方便用户使用。 方法 说明 requests.request() 构造一个请求，支撑以下个方法的基础方法 requests.get() 获取HTML网页的主要方法，对应于HTTP的GET requests.head() 获取HTML网页头信息的方法
requests库 使用方法汇总笔记
知远同学的博客
11-03 1316
通过使用requests库的get方法，向百度搜索提交关键词进行搜索，然后返回搜索内容，这是requests库最基本的方法，也是最常用的方法，实例如下： import requests def getHtmlText(url,data): #定义一个函数，通用框架 try: user_agent="Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 \ (KHTML, like Gecko) Chro.
2023最新 requests 库的使用（非常详细）从零基础入门到精通，看完这一篇就够了！！！
logic1001的博客
12-20 2625
urllib库使用繁琐，比如处理网页验证和Cookies时，需要编写Opener和Handler来处理。为了更加方便的实现这些操作，就有了更为强大的requests库。
request库的基本使用
weixin_30786617的博客
11-28 2066
总体功能的一个演示 import requests response = requests.get("https://www.baidu.com") print(type(response)) print(response.status_code) print(type(response.text)) print(response.text) print(respo...
【python爬虫基础入门】python爬虫requests库使用操作全解
热门推荐
Freedom_Blue的博客
05-16 2万+
文章目录一.HTTP协议1. HTTP协议的框架2. HTTP协议对资源的操作3. 用户对HTTP协议的操作二.requests库的安装三.requests库的7个主要使用方法1.方法的解析2.方法的使用1) get方法使用2) head方法的使用3) post方法的使用3. requests库的异常处理四.爬取网页的通用代码框架五.requests库爬虫实例1. 对京东商品页面的爬取2. 百度/...
初识爬虫之requests库使用篇
迷茫与徘徊只会让你陷入绝境，欢迎私信博主，带你开始提升变现价值！
08-14 1483
之前我们了解过了urllib的库的使用方法，但是我们发现在实际的运用过程中，我们使用requests更加的频繁一些。它可以解决之前的一些繁琐的语法，强大的地方我们就开始看看吧！ import requests r=requests.get("https://www.baidu.com/") # print(type(r))#类型 print(r.status_code)#状态码 # print(type(r.text))#响应体类型 # print(r.text)#内容 print(r.cookies)#c
一、Requests库的基本使用方法
木头博客
03-26 1472
一、Requests库的基本使用方法 1、掌握安装requests库的方法 2、掌握requests库的常用方法 3、利用requests获取网页基本内容 4、利用requests发送网页数据 《源代码》 import requests print("----------------------------------------------------------------------------1") r = requests.get("http://httpbin.org/get") print
【Python】一文教你如何使用 Requests 库
Code_and516的博客
06-08 1534
Requests 库是一个简洁易用的 Python HTTP 库，它基于 urllib3 库，可以用来发送 HTTP 请求，并处理响应结果。Requests 库提供了一种更人性化的接口，让用户更容易地编写 HTTP 请求代码。相比于 Python 自带的 urllib/urllib2 库，Requests 功能更加完整且易用，而且支持多种协议和认证方式，具有更好的扩展性和可读性。
requests库基本使用
10-08
以下是Requests库的基本使用方法： 1. 首先，需要安装Requests库。可以使用pip命令进行安装，如：pip install requests。 2. 导入Requests库，使用import语句，如：import requests。 3. 发送GET请求，可以使用...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值