python提交表单时属性名重复问题的解决

最新推荐文章于 2023-06-27 09:21:15 发布
最新推荐文章于 2023-06-27 09:21:15 发布
阅读量725 收藏 2
点赞数
分类专栏： python爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/brink_compiling/article/details/52662005
版权

写爬虫时会遇到提交表单的问题，一般先构造data，然后利用post方式进行提交表单。一般data的数据类型为字典，但当遇到多个数据项的属性名字重复时，则不能够使用字典了，因为字典中的键是不能够重复的。对于这个问题的解决可以使用，列表+元组的形式进行data数据的构造。如下：

data=[('data_name','value'),('data_name','value'),('data_name','value')...]


_compiling
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Python selenium模块实现定位过程解析
09-16
Python Selenium 模块是自动化测试和网页操作的重要工具，它允许开发者模拟用户行为，如点击按钮、填写表单和导航等。在这个过程中，精准地定位网页元素是关键。本篇文章将详细解析Python Selenium如何实现元素定位...
爬虫post提交数据时遇到name属性值相同该怎么处理
weixin_42240407的博客
11-10 1234
爬虫遇到name属性值相同该怎么处理 在前些天大伙在群里聊天有人问到，爬虫过程中post提交表单数据时发现Form中有多处name属性值相同，该如何处理。 在多数情况下提交表单的data数据字典如下： data = { "name": "village head", "sex": "girl", "age": &
bs4爬取的时候有两个标签相同_python爬虫初体验，爬取中国最好大学网大学名次...
weixin_31720909的博客
12-18 704
程序员天天只顾写生活琐事的文章可就太对不起其他的程序员们了，某大佬给我在线寄了一张刀片的图片，催更技术分享，不得不动手了。从今年刚开始学习python，美妙的语法令人陶醉，好用的第三方库令人爱不释手。由于能力有限，还在入门阶段，今天就分享一个小白级python爬虫实例。爬取最好大学网的大学高校排名并输出到csv文件中。还是那句话，代码入门级，人也是入门级，命名不规范处可轻喷。废话不多说，开始开始。...
python爬虫遇到的一些杂七杂八的问题（2）
知易行难的博客
12-14 1041
1.一开始发现爬下来的数据，两两重复，但是整体上可能也有更多重复 所以想把偶数个的列表元素删掉，所以想： for i： if i%2 ==0 listt.pop（i） 后来发现这样不行，因为pop掉一个，后面的往前走，就乱掉了 2.最后采取的办法是，创建一个空列表（a=[]就可以了，a=list（）也可以），然后进行append， 只append偶数就可以了 在这里还是犯了一点错，没有a=a.append，直接a.append就可以了 用第一种写法会遇到none type object e
爬虫中遇到POST请求中表单数据出现重复参数时的处理方式
大潘的博客
11-19 1341
如下图 form data中出现的参数 disclosureSubtype[] needFields[] ，出现了至少两次 那么爬虫中模拟请求时如何使用呢： 一下两种方式均已测试可用（使用的python测试） 格式一 data = [ ('disclosureSubtype[]', '9503-1004'), ('disclosureSubtype[]', '9504-2106'), ('page', '0'), ('companyCd', ''), ('isNewThree',.
python爬虫之requests库post请求
naer_chongya的博客
05-27 1万+
在使用 requests 库进行网页数据爬取时，我们常常会选择使用 get 请求，比如直接访问一个 url，获取页面源代码来进行进一步处理。但有时候这种方式会因为需要登录、表单数据提交等原因失效。这时候，就需要使用 post 请求了。Post 请求通常用于向服务器提交一些数据，比如用户名密码等敏感信息，一般来说，Get请求用来获取数据，Post 请求用来提交数据。
Python编程入门经典
10-27
第Ⅰ部分 初步了解Python 第1章 编程基础和字符串 3 1.1 编程与使用计算机的区别 3 1.1.1 编程的一致性 3 1.1.2 编程的可控性 4 1.1.3 程序要应对变化 4 1.1.4 小结 4 1.2 准备工作 4 1.2.1 在非Windows系统上安装 ...
Python核心编程第二版(ok)
05-21
Python核心编程第二版(ok) 第1部分　Python核心 　第1章　欢迎来到Python世界　 　1.1　什么是Python　 　1.2　起源　 　1.3　特点　 　1.3.1　高级　 　1.3.2　面向对象　 　1.3.3　可升级　 　1.3.4　可扩展　 　...
ajax表单验证例子
09-25
传统的表单验证通常会在用户提交表单后才进行，如果数据无效，会返回到原始页面并显示错误信息，而AJAX可以实时验证用户输入，即时反馈错误，避免了页面刷新带来的不便。 表单验证是确保用户输入符合预期规则的关键...
6.用python写网络爬虫，表单交互
weixin_74021557的博客
06-27 1588
6.1登录表单在前面几章中，我们下载的静态网页总是返回相同的内容。而在本章中，我们将与网页进行交互 根据用户输入返回对应的内容。本章将包含如下几个主题：发送 POST 请求提交表单：使用 cookie 登录网站：用于简化表单提交的高级模块Mechanize。想要和表单进行交互，就需要拥有可以登录网站的用户账号。现在我们需要手工注册账号，其 网址为http://example.webscraping.com/user/register。
解决连接数据库出现属性名重复
weixin_57784746的博客
06-08 2053
开发工具与关键技术:VS jQuery 作者：陈啸天撰写时间：2022/6/7我们将连接好的数据库从Model中删除，重新连接数据库时，当我们取跟被删除的数据库的属性名相同时，便会报错。报跟应用程序发生冲突，意思就是数据库的属性名重复了。 那么问题来了，我们都将之前的连接的数据库都删除了，为什么还会发送重复呢？因为我们将连接的数据库从项目中删除了，但在Web中是有记录的，所以我们在重新连接数据时，还用上一个属性名，就会出现错误。如果还想使用之前的属性名，我们就要找到之前的属性名，将它删除掉，这样就可以使用之
Python requests 传入同名参数
qq_33362684的博客
03-25 782
requests 传入参数的时候，data可为字典，元组列表，字节或要发送到指定URL的文件对象 一般情况下，dictionary｛｝格式 {'p_username' : username, 'p_password' : password} 但是如果接口需要传入类似于如下格式的参数 ｛ 'name':'username', 'role':'班主任', 'role':'数学老师' ｝ 传入之后，你会发现导致同名参数会被覆盖，role字段只会传一个值 因为dictionary无法包含duplicate k
form表单提交时多个相同name属性问题解决方案一
热门推荐
老关的博客
02-13 2万+
1. 问题背景 2. 解决方法 2.1. 后台处理 2.2. 前端处理 2.2.1. 分析 2.2.2. 解决 1 问题背景 项目中有这样的需求：根据不同的业务逻辑填写不同的表单提交到数据库中， 但是不同的表单之间又有一些字段是一样的，也就是说在form表单里存在多个name值相同的 input输入框，这样在提交的时候就会有这么一个问题，有几个相同name的值提交， ...
python requests接收多个同name文件
uncle_yiba的博客
05-09 3443
需求: 1.需要向服务器发送多个同name的文件，如何发送请求 2.服务器后端如何接收到这些同name文件 发送请求样例 requests.post( url=”http://localhost:8080/test", data={'name':'xiaoming', 'age':18}, files=[ ......
html标签中name属性重复的问题
qq_33693776的博客
05-21 2648
name属性值重复导致保存的值有逗号 今天老项目出了一个bug，这里说一下，项目是用jsp作为页面的。 问题是这样的，新增一条记录的时候，没有任何问题。然后在编辑这条记录的时候，出现了一个问题，有一个属性值是通过单选框选择的，单选框显示的属性值也正常，但是保存后，某个字段的值就**变成了",XXX"**了，前面多了一个逗号！！！！ 经过了一番内心斗争（肯定是操作的问题！！）和debug后，发现在进入更新接口的时候，值就被加上逗号了，所以感觉是页面jsp做了什么操作，然后发现了以下代码（栗子） <div
多个类定义attr属性重复的问题:Attribute ＂xxx＂ has already been defined
zhuhai__yizhi的专栏
04-28 1316
如果从单独开发app的话，可能不会遇到多个自定义类的attribute 的名字重复的问题。但是如果是团队合作开发的话，可能会碰到这样的问题，A和B自定义的两个类都用了同一个名字来定义属性，这时系统会报出警告，Attribute "xxx" has already been defined. A和B又都不想修改自己的名字，这时就很头痛。 下面举个例子，在values文件夹下定义一个
python爬虫post参数_Python爬虫post参数包含重复键
weixin_39623350的博客
12-08 367
我在写Python爬虫的时候，pycharm一直提示包含重复键，但程序可以运行。但是运行结果只爬了一部分内容下来。三个“Pu00021_Iuput.content”只能运行一个。我试过设置参数for循环，都不行。求教！coding=utf-8”’ author:Chenwentaodate:2016-2-26function:抓取指定网页数据”’import urllibimport urlli...
Python提交表单
最新发布
09-05
Python可以使用requests库来提交表单。通过POST方法，可以向服务器发送表单数据。下面是一个示例代码，用于提交表单数据： ``` import requests params = {'firstname': 'cck', 'lastname': 'Mi'} r = requests.post("http://pythonscraping.com/files/processing.php", data=params) print(r.text) ``` 在这个例子中，我们使用requests库发送了一个POST请求，将参数`params`作为表单数据发送到URL为`http://pythonscraping.com/files/processing.php`的服务器上。服务器会将接收到的表单数据进行处理，并返回相应的响应。我们可以使用`r.text`来获取服务器返回的内容。 另外，表单提交也可以用于认证。比如，我们可以使用HTTPBasicAuth来进行基本身份验证。下面是一个示例代码： ``` import requests from requests.auth import HTTPBasicAuth auth = HTTPBasicAuth('cck', 'password') r = requests.post(url="http://pythonscraping.com/pages/auth/login.php", auth=auth) print(r.text) ``` 在这个例子中，我们使用HTTPBasicAuth来进行基本身份验证。我们提供了用户名和密码，然后使用POST方法向URL为`http://pythonscraping.com/pages/auth/login.php`的服务器发送请求。服务器进行身份验证，并返回相应的响应内容。 总结起来，Python可以使用requests库来提交表单数据，并可以通过POST方法实现不同的功能，如发送普通表单数据或进行身份验证。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *2* *3* [Python的提交表单功能](https://blog.csdn.net/JBlock/article/details/79304075)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 100%"] [ .reference_list ]

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值