python爬虫——requests.exceptions.InvalidHeader: Invalid return character or leading space in header: co

最新推荐文章于 2022-11-11 20:07:34 发布
最新推荐文章于 2022-11-11 20:07:34 发布
阅读量744 收藏
点赞数
分类专栏： Python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44020179/article/details/104064246
版权

在使用requests库爬去淘宝时，在登录输入headers参数时，复制user-agent和cookis时多了空格。

headers
{‘cookie’: ’ uab_collina=157258226625083933457665; thw=cn; t=36d1cd24cf0143fb6accdf025534d197; enc=97GhrHhKkErSIlgzQuOf4gDv8yB1IDMrzS%2FqNp8OhQXosfA5%2Bpm6Vj4%2B%2FjCYIIsIglI%2FeakHaMTRg2bsOCGe%2Fg%3D%3D; hng=CN%7Czh-CN%7CCNY%7C156; cna=PpdBFupPaykCAbdAPqcqw59D; v=0; cookie2=121748a20166b93dd684c8261dc86eb6; tb_token=f5bfe803ea637; XSRF-TOKEN=bff8aff9-5855-462d-a51f-99327ffa22e9; unb=895641240; uc3=nk2=Dko1KHWW&lg2=V32FPkk%2Fw0dUvg%3D%3D&id2=W8CIr%2FInTwtU&vt3=F8dBxdrNehCzWbX4PiU%3D; log=lty=Ug%3D%3D; csg=ca96291a; lgc=mzl990; cookie17=W8CIr%2FInTwtU; dnk=mzl990; skt=3c7a061320213fc1; existShop=MTU3OTU5ODE3Ng%3D%3D; uc4=id4=0%40WeNSQi8PrsoaiTXNzq3tCtfo1AA%3D&nk4=0%40DC%2BBCTLI5cN5BWGCg1N66fI%3D; publishItemObj=Ng%3D%3D; tracknick=mzl990; lc=Vyu4NkM3MhOuOyU%3D; cc=VFC%2FuZ9ajQ%3D%3D; lid=mzl990; tg=0; l_g=Ug%3D%3D; sg=008; nk=mzl990; cookie1=URmpRRlcewZgBX8x0WMItvw16nPjfGq5qrfiOwYV25E%3D; uc1=cookie16=Vq8l%2BKCLySLZMFWHxqs8fwqnEw%3D%3D&cookie21=WqG3DMC9Fbxq&cookie15=W5iHLLyFOGW7aA%3D%3D&existShop=false&pas=0&cookie14=UoTblALr4qh4Kw%3D%3D&cart_m=0&tag=8&lng=zh_CN; mt=ci=60_1; cookieCheck=54115; isg=BD09yDFsP3oon5sS1iGFb0SYTJA32nEsVjpWJ-CeRTDNl1oxyqB_Avm5GpwrYnk; l=cBSUpxagQxmM5G2EBOCanurza77OSIRYYuPzaNbMi_5Ce6T1e4_Oo0-5vF96VjWd9n8B4-ERe5p9-eteN8tZLSSpXUJ1.’, ‘user-agent’: ‘Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/78.0.3904.70 Safari/537.36’}

发动机一号
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
专栏目录
python中报错requests.exceptions.InvalidHeader: Invalid return character or leading space in header: Acc
qq_42133828的博客
02-09 1万+
这是因为你在写头部的时候加入了空格，例： headers={ 'Host' : ' 123.206.31.85:49167', 'User-Agent' : ' Mozilla/5.0 (Windows NT 10.0; WOW64; rv:65.0) Gecko/20100101 Firefox/65.0', 'Accept' : ' text/html,applic...
python -ValueError和requests.exceptions.InvalidHeader报错
weixin_49006942的博客
03-24 900
requests.exceptions.InvalidHeader: Invalid return character or leading space in header: Cookie 这个报错是因为在请求头中的某个值存在空格 'Referer': "空格位置 http://fanyi.youdao.com/", 还有另外一中报错是ValueError，这种情况出现是因为键的位置存在空格 '空格位置Referer': "http://fanyi.youdao.com/", 以上两种报错只要我们在书
requests.exceptions.InvalidHeader: Invalid return character or leading space in header: user-agent
weixin_44606217的博客
03-31 3837
requests.exceptions.InvalidHeader: Invalid return character or leading space in header: User-Agent
^.^
06-05 367
错误原因：在浏览器粘贴来的头请求信息里开头不能有空格。 错误示范： header={ 'User-Agent':' Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.149 Safari/537.36' } 正确示范： header={ 'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64;
requests.exceptions.InvalidHeader: Invalid return character or leading space in header: cookie
Quincy.Coder的博客
09-23 1653
今天写爬虫遇到个问题： raise InvalidHeader(“Invalid return character or leading space in header: %s” % name) requests.exceptions.InvalidHeader: Invalid return character or leading space in header: cookie 查了查，原...
python requests.get带header
09-16
`requests.get()`方法就是实现这一功能的关键。 当我们调用`requests.get()`时，可以通过传递一个`headers`参数来添加自定义的HTTP头部。例如： ```python import requests headers = { 'User-Agent': 'Mozilla/...
python使用pip安装模块出现ReadTimeoutError: HTTPSConnectionPool的解决方法
01-20
pip._vendor.urllib3.exceptions.ReadTimeoutError: HTTPSConnectionPool(host=’files.pythonhosted.org’, port=443): Read timed out. 使用镜像：pip install xxxx -i https://pypi.douban.com/simple 如下： pip...
python爬虫学习案例-.Requests.rar
最新发布
05-30
01爬虫开篇.py 02.requests之网页采集器,Py03.requests之破解百度翻译,py04.requests之豆瓣电影排行榜,Py05.requests之肯德基地址爬取.Py06.requests之化妆品药监总局爬取.py
python爬虫学习笔记.zip
12-30
Python爬虫学习笔记 在IT领域，Python爬虫是一种常用的技术，用于自动化地从互联网上抓取大量数据。Python语言因其简洁的语法和丰富的库支持，成为开发爬虫的首选工具。本篇将深入探讨Python爬虫的相关知识点，帮助...
python requests进行接口请求时，requests.exceptions.InvalidHeader异常解决
Heckle_s的博客
09-11 6627
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 欢迎使用Markdown编辑器 你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Mar
报错InvalidHeader: Invalid return character or leading space in header: User-Agent
m0_56005581的博客
10-26 314
如图，冒号后面的字符串开头不能是空格。
requests.exceptions.InvalidHeader和伪造headers添加'Content-Type'的重要性
后青春诗ing
09-20 4404
第一个问题： 今天在编写爬虫的时候在写headers时候： headers = { "User-Agent": " Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/49.0.2623.221 Safari/537.36 SE 2.X MetaSr 1.0", } “Use...
requests.exceptions.InvalidHeader: Invalid return character or leading space in header: user-agent错误
qq_54641516的博客
07-24 5552
百度无果，后来发现是粗心的问题在从浏览器贴回来的请求头信息里面，不能有空格。进行爬虫操作时，出现了没见过的问题。一个空格这类的问题很难发现，共勉。
爬虫requests.exceptions.InvalidHeader: Invalid return character or leading space in header: user-agent
Kobe1916的博客
08-06 1003
报错：requests.exceptions.InvalidHeader: Invalid return character or leading space in header: user-agent 大意：请求头头中的返回字符或前导空格无效 原因： headers= {"User-Agent":" Mozilla/5.0 (Windows NT 10.0; Win64; x64) Apple...
requests.exceptions.InvalidHeader: Invalid leading whitespace, reserved character(s), or returnchara
qq_43295567的博客
11-11 6185
会报这个错误是因为从浏览器复制过来的User-Agent有空格，删掉自己打一遍就好了。
python爬虫之请求头报错：ValueError: Invalid header name b‘:authority‘
热门推荐
六五酥的博客
04-09 1万+
目录 最近在爬取一个医学权威网址上面的论文，发现一个问题，采用以下方式进行请求 运行之后报错： 明显是无法解析请求头，说通俗点就是老子不认识你，所以报错 查看资料说这是hppt2的请求 作为RFC 描述，Http 请求头不能以分号开头 安装hyper进行解析，因为hyper认识这样的请求头 pip install hyper 代买修改为如下： import requests from bs...
写爬虫过程中的常见问题与错误
Stalla_s_bf的博客
10-27 1390
爬虫常见错误
Invalid return character or leading space in header: User-Agent 错误
qq_42621977的博客
05-10 9124
不是第一次使用请求头了，这个错误确实第一次遇见。 raise InvalidHeader("Invalid return character or leading space in header: %s" % name) requests.exceptions.InvalidHeader: Invalid return character or leading space in heade...
requests.exceptions.invalidheader: invalid return character or leading space in header: user-agent
06-28
### 回答1： 看起来您正在使用 Python 的 requests 库发起 HTTP 请求时遇到了一个异常，提示为 "requests.exceptions.invalidheader: invalid return character or leading space in header: user-agent"。 这个异常通常表示您在请求头中的 User-Agent 字段中使用了无效的字符，可能是一些不可见的字符，例如回车符或空格。HTTP 协议规定请求头中的字段必须是 ASCII 字符，因此包含非 ASCII 字符的请求头可能会引起这个异常。 要解决这个问题，您可以尝试检查请求头中的 User-Agent 字段，确保它只包含 ASCII 字符。您可以尝试删除请求头中的所有空格、回车符等不可见字符，或者使用一个合法的 User-Agent 值来替换当前的值。 例如，您可以将 User-Agent 设置为常见的浏览器标识符，例如 "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3"，这是 Chrome 浏览器的标识符。您可以将其作为 User-Agent 字段的值来使用： ```python import requests headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3' } response = requests.get('https://www.example.com', headers=headers) ``` 希望这可以帮助您解决问题！ ### 回答2： requests.exceptions.invalidheader: invalid return character or leading space in header: user-agent 是请求时由 requests 模块抛出的一个异常。这种异常通常是由于 HTTP 的请求头信息中出现了不符合规范的字符或空格导致的。 首先需要理解 HTTP 请求头，它是向服务器发送的与 HTTP 请求相关的附加信息，包括浏览器信息、Cookie 信息、用户代理信息、缓存控制信息等，它们通过键值对的方式依次排列，每个键值对之间要用回车和换行符隔开。由于 HTTP 协议规定了请求头信息的格式要求，如果出现了不符合规范的字符或其他错误，就会抛出该异常。 一个常见的原因是在请求头信息中包含了不合法的字符或空格，这些字符可能是因为系统错误使用了不兼容的字符编码或者因为在复制文本时产生了空格符。为了解决这个问题，可以尝试修改请求头信息中的字符，也可以使用其它的 HTTP 请求库。 除此之外，还有一些可能会导致请求头信息异常的情况，如网络问题、服务器响应超时等。在这些情况下，可以尝试重新请求，或者调整请求头信息中的参数，以确保其符合 HTTP 协议的规范。 ### 回答3： 该错误是由于请求报头中"user-agent"的格式不符合标准要求所导致的。 "user-agent"是HTTP请求头中的一个重要部分，它用于标识发送请求的客户端类型。通常情况下，它应该是一个字符串类型的值，并且不能包含不合法的字符，如回车符或前导空格。 当我们发送一个请求时，请求报头中的"user-agent"需要遵循特定的规范。如果"user-agent"的格式不正确，服务器就无法正确解析请求报头，并返回一个"requests.exceptions.invalidheader"异常。 为了解决这个问题，通常需要检查请求报头中"user-agent"的格式是否符合标准要求。如果不符合，可以尝试更换一个合法的"user-agent"值，或者将其格式进行修正。 另外，在编写爬虫程序时，也应该遵循合法的网络爬虫规范，包括设置正确的"user-agent"值，以避免对服务器造成过度的负担，并保护自己的程序不被封禁。 总之，该异常是由于请求报头中"user-agent"格式不正确所导致的，我们可以检查请求报头中"user-agent"的格式是否符合标准要求，并进行相应的修正。同时，在编写爬虫程序时应遵循合法的网络爬虫规范，以确保程序的稳定运行和不被封禁。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值