爬虫-urlencode与parse_qs函数

最新推荐文章于 2024-03-30 19:49:53 发布
最新推荐文章于 2024-03-30 19:49:53 发布
阅读量1.8k 收藏 2
点赞数 2
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ifubing/article/details/104438735
版权

urlencode

》功能

将URL进行编码
在这里插入图片描述

》用法

from urllib import parse

qs = parse.urlencode(字典)

# qs就是编码后的查询结果

例子

在这里插入图片描述

》发起请求时路径有中文，会报错

在这里插入图片描述

》解决办法

在这里插入图片描述

parse_qs

》功能

把编码后的内容进行解码

》用法

from urllib import parse

res = parse.parse_qs(编码的查询字符串）

# res会是一个字典

在这里插入图片描述

鲸鱼编程pyhui
关注
  • 2
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
modstart_cms_2.4.0_base-source_bt_src.zip
12-01
2021年12月01日ModStartCMS发布v2.4.0版本，增加了以下14个特性： ·[新功能] 内置Animate.CSS动画，内置滚动动画插件 ...·[Bug修复] 前端UrlEncode为数字时处理异常 ·[Bug修复] 一处正则匹配问题
PHP rawurlencode与urlencode函数的深入分析
12-19
问题:2个函数都是针对字符串转义使其适合做文件名。该用哪个？哪个更标准？ 结论:rawurlencode遵守是94年国际标准备忘录RFC 1738，urlencode实现的是传统做法，和上者的主要区别是对空格的转义是’+’而不是’ ′...
爬虫基础-urlencode
weixin_47249161的博客
02-26 214
1.什么是urlencode？ urlencode是一个可以将字符串以url的形式编码的模块（在爬虫当中这个字符串通常为作为请求参数的头部信息，这种参数直接可以在链接当中发现） from urllib.parse import urlencode from urllib.parse import urlencode data = { 'name' : 'Lantern Festival', 'time' : '2021.2.26', } print(urlencode(data)
爬虫_urlencode问题
zslngu的博客
04-02 417
抓取小说的时候，查看小说搜索书名的接口 发现提交的data为 keyword=%CC%EC%CC%C6%BD%F5%D0%E5&t=1 中文部分进行了urlencode，尝试用 python的urllib.parse 的unquote解析一下，发现打印出来的是乱码，看了一下网站的编码是gbk，猜测这个应该是gbk编码的字符串urlencode之后的 unquote('%CC%EC%CC%...
Python爬虫爬取智联招聘（进阶版）(1)，Python教程零基础入门
Python毕设源码程序王哥
03-30 1622
学好 Python 不论是就业还是做副业赚钱都不错，但要学会 Python 还是要有一个学习规划。最后大家分享一份全套的 Python 学习资料，给那些想学习 Python 的小伙伴们一点帮助！
urlencode函数---爬虫学习
python_Allen的博客
06-24 362
urlencode函数： 用浏览器发送请求的时候，如果url中包含了中文或者其他特殊字符，那么浏览器会自动的给我们进行编码。而如果使用代码发送请求，那么就必须手动的进行编码，这时候就应该使用urlencode函数来实现。urlencode可以把字典数据转换为URL编码的数据。示例代码如下： from urllib import parse data = {‘name’:‘爬虫基础’,‘greet’:‘hello world’,‘age’:100} qs = parse.urlencode(data) pri
parse_qs函数---爬虫学习
python_Allen的博客
06-24 1212
parse_qs函数： 可以将经过编码后的url参数进行解码。示例代码如下： from urllib import parse qs = “name=%E7%88%AC%E8%99%AB%E5%9F%BA%E7%A1%80&greet=hello+world&age=100” print(parse.parse_qs(qs))
Python：urllib解析查询参数parse_qsl、parse_qs
彭世瑜的博客
03-04 3618
from urllib.parse import parse_qsl, parse_qs q = 'name=Tom&name=Jack&age=13&school=&home' print(parse_qsl(q)) # [('name', 'Tom'), ('name', 'Jack'), ('age', '13')] print(parse_qs(q)) # {'name': ['Tom', 'Jack'], 'age': ['13']}
用JavaScript实现PHP的urlencode与urldecode函数
12-09
很多朋友说JavaScript的decodeURI函数也可以...和之前的urlencode函数一样，只实现了utf-8版的。 1、urlencode 使用方法： urlencode(str); function urlencode(clearString) { var output = ''; var x = 0; clear
ASP中实现的URLEncode、URLDecode自定义函数
10-25
主要介绍了ASP中实现的URLEncode、URLDecode自定义函数,和ASP自带的server.urlencode是不一样的哦,需要的朋友可以参考下
【Python】URL编码(urlencode)和URL解码(parse_qs)
Alan的博客
04-10 4553
提要:编码用urlencode()函数 解码用 （parse_qs） 图片: 代码: #encoding: utf-8 from urllib import request from urllib import parse keyword = {"wd":"庄宿正"} encode = parse.urlencode(keyword) print(encode) print(...
python 分析http查询字符串 urlparse.parse_qs
WangSai.coo的专栏
07-22 1万+
parse_qs 有几种实现 urlparse.parse_qs 返回字典 urlparse.parse_qsl 返回列表 这个模块在 python 3.0 中 改名为 urllib.parse urllib.parse.parse_qs 返回字典 urllib.parse.parse_qsl 返回列表 cgi中的这两个函数已经废弃了, 留在模块中 只是为了向后兼容, 推荐
3.urlretrieve函数、urlencode函数和parse_qs函数--爬虫
weixin_41684949的博客
07-03 205
urlretrieve函数： 这个函数可以方便的将网页上的一个文件保存到本地。以下代码可以非常方便的将百度的首页下载到本地。 from urllib import request request.urlretrieve('http://www.baidu.com/','baidu.html') 上面把生成的baidu.html保存在本地。 urlencode函数： 用浏览器发送请求的时候，如果u...
利有Python库urllib.parse的成员函数parse_qs()解析URL 中的查询字符串
昊虹AI笔记
03-30 882
利有Python库urllib.parse的成员函数parse_qs()解析URL 中的查询字符串
python爬虫之urllib.parse详解
热门推荐
haoweixl的博客
03-05 1万+
使用 urlencode() 函数可以将一个 dict 转换成合法的查询参数： dict1 = {'key1': 'one', 'key2': 3, 'key3': '中国', 'key4': '加油' } # 字典类型 import urllib.parse print( urllib.parse.urlencode(dict1) ) 结果为: key1=one&key2=3&am...
python中parse.parseqs是干嘛的_用Python URL Parse Parse qs解析URL
weixin_42378973的博客
02-09 1062
这在Python2.7中有效，但在3.5中无效我正在尝试分割一个url的参数，然后用一个新值(md5散列)更改其中一个参数。URL就这样崩溃了ParseResult(scheme='http', netloc='example.com', path='/dynamic', params='', query='t=MD5-YOUR-OAUTH-TOKEN&p=11111111', fragm...
python爬虫开发 urlparse、parse_qs、urlencode、quote、unquote、urljoin 用法总结
qq_40734108的博客
10-11 651
这个模块在爬虫开发过程中使用地频率非常高，这里总结了一些常用用法。
k8s1.16的jenkins部署java项目cicd(cd手动)-kubernetes安装包和详细文档笔记整理
最新发布
05-28
k8s1.16的jenkins部署java项目cicd(cd手动)-kubernetes安装包和详细文档笔记整理
sja1311.x86_64.tar.gz
05-28
SQLyong 各个版本，免费下载 SQLyog是业界著名的Webyog公司出品的一款简洁高效、功能强大的图形化MySQL数据库管理工具。使用SQLyog可以快速直观地让您从世界的任何角落通过网络来维护远端的MySQL数据库。
$ curl --data-urlencode "your_string"
07-08
`--data-urlencode`选项用于在POST请求中编码表单数据，而不是对字符串进行URLEncode编码。 要在shell命令中对字符串进行URLEncode编码，可以使用`printf`和`urlencode`命令的组合。`urlencode`命令可以对字符串...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

鲸鱼编程pyhui

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值