PHP curl 执行结果老是301 Moved Permanently

最新推荐文章于 2022-01-20 16:36:36 发布
最新推荐文章于 2022-01-20 16:36:36 发布
阅读量3.2k 收藏 1
点赞数
分类专栏： # PHP 文章标签： php curl Moved Permanently 301
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_36025814/article/details/108347295
版权

一、场景

在浏览器访问一个路径，路径对应的方法里有一个请求第三方URL接口的方法，输出结果echo $result，打印如下：
在这里插入图片描述

二、解决

curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);
  • location属性就代表重定向的地址。
  • 如果curl爬取过程中，设置CURLOPT_FOLLOWLOCATION为true，则会跟踪爬取重定向页面，否则，不会跟踪重定向页面。

三、参考地址

使用 PHP 实现 301 永久重定向
小刘哥的博客
07-26 1336
在网站开发和维护的过程中,我们经常需要对 URL 结构进行调整和优化。比如,当网站的某个页面或目录发生变更时,我们需要将旧的 URL 永久性地重定向到新的 URL,以确保用户和搜索引擎能够顺利访问到最新的内容。这种情况下,我们可以使用 HTTP 状态码 301 (Moved Permanently) 来实现永久重定向。301 重定向是一种非常有效的 SEO 技巧,它可以帮助我们保留原有页面的 PageRank 和搜索引擎排名。
PHP 面试知识点整理归纳
PHP学习日志——地雷
09-05 1万+
全文已整理补充完毕，以后还会继续更新文章里面的错误，以及补充尚不完善的问题。 该篇文章是针对Github上wudi/PHP-Interview-Best-Practices-in-China资源的答案个人整理 lz也是初学者，以下知识点均为自己整理且保持不断更新，也希望各路大神多多指点，若发现错误或有补充，可直接comment，lz时刻关注着。 由于内容比较多，没有直接目录，请自行对照 Gi...
使用php的curl函数post返回值为301永久迁移的问题。(301 Moved Permanently)
井底之蛙
09-06 4904
添加一行curl_setopt： curl_setopt($ch,CURLOPT_FOLLOWLOCATION,1); 这句话的意思是当遇到location跳转时，直接抓取跳转的页面。
使用php的curl函数post返回值为301永久迁移的问题。(Moved Permanently)
getcomputerstyle的博客
09-04 7332
这个问题的出现真让人摸不着头脑，然后点击here之后就跳转到了自己想要post的页面。然后网上搜可以一下，最终解决方法为： 添加一行curl_setopt： curl_setopt($ch,CURLOPT_FOLLOWLOCATION,1); 这句话的意思是当遇到location跳转时，直接抓取跳转的页面。
linux使用curl命令返回301 moved permanently
a932946893的博客
12-23 1万+
linux使用curl命令返回301 moved permanently 在nginx中配置了前端项目踩坑。使用curl命令测试连通性，结果一直返回301 moved permanently。确认了配置无误后经查是由于页面经过nginx被重定向所以返回301，最后添加参数curl -L即可自动重定向到指定页面，搞定。 ...
Nginx架构及配置详解
企业实战系列集 ●●● https://ximenjianxue.blog.csdn.net
09-10 5768
概述 Nginx采用C进行编写，是俄罗斯程序员开发的一款轻量级的可构建Web 服务器/反向代理服务器及电子邮件（IMAP/POP3）代理服务器的软件， Nginx服务器是一个高性能的HTTP和反向代理web服务器，同时也可提供了IMAP/POP3/SMTP服务。nginx常用作跑静态和做负载反向代理，动态php交给apache处理，因后者比较稳定，jsp交给tomcat、resin或jboss。n......
2、nginx常用配置----作为web服务端
wangzhenyu177的博客
12-09 1万+
呵呵
linux学习43-HTTP服务和APACHE2
你的微笑像茉莉的博客
10-23 478
HTTP服务和APACHE2 1. http协议 http协议版本 http/0.9, http/1.0, http/1.1（较多）, http/2.0（将来） http协议无状态 stateless 无状态 服务器无法持续追踪访问者来源 解决http协议无状态方法 cookie：客户端存放 当用户访问网站时，希望网站可以记录下来这次访问和上次访问的用户是否为同一个，当用户访问网站www....
Nginx反向代理与负载均衡
Blog of Stevenux
01-11 2586
Nginx反向代理与负载均衡一. Nginx 反向代理1.1 反向代理介绍1.2 Nginx 反向代理1.2.1 Nginx 反向代理生产环境典型架构1.2.2 反向代理配置参数1.2.3 Nginx 反向代理示例将 http 请求代理到单台后端服务器代理时指定 location反向代理的缓存功能非缓存场景压力测试在代理服务器配置缓存访问并验证缓存开启缓存后压力测试加头部报文信息验证头部信息1.2...
wget正常 curl、 应用报错301 Moved Permanently
StuLoveQ的博客
06-18 4880
301 Moved Permanently 是什么意思 301永久重定向是一种非常重要的“自动转向”技术，是网址重定向最为可行的一种办法。当用户或搜索引擎向网站服务器发出浏览请求时，服务器返回的HTTP数据流中头信息(header)中的状态码的一种，表示本网页永久性转移到另一个地址 简而言之，告诉用户我们搬家了 诡计 浏览器可以访问说明这个网址并没有搬家 真相 服务器为了防止被...
301 Moved Permanently错误
weixin_38710804的博客
01-20 2796
301 Moved Permanently错误
<?php Header( "HTTP/1.1 301 Moved Permanently" ); Header( "Location: http://g.cn/"
cyuyan的专栏
05-18 1766
Header( "HTTP/1.1 301 Moved Permanently" ); Header( "Location: http://g.cn/" ); ?>
301 Moved Permanently问题排查与解决
热门推荐
taipoucha5799的博客
11-04 11万+
1、问题描述 技术支持反馈通知商户通知不到。即根据商户传过来的地址（举例：http://www.A.com）进行封装(封装后：http://www.A.com?trxNo=123)并请求商户，结果是失败。 2、问题排查 遇到问题，首先是在机器curl下，发现出现了301 Moved Permanently。简单解释下这个错误码 3xx 类状态码表示客户端请求的资源发送了变动，需要客户端⽤新的 URL ᯿新发送请求获取资源，也就是重定向。 「301 Moved Permanently」表示..
php 301 失败,php cURL函数301错误
weixin_28920737的博客
03-12 582
CURLOPT_FOLLOWLOCATION cannot be activated when in safe_mode or anopen_basedir is set你可以试试这个：解决方案1：在php.ini文件中设置safe_mode = Off(通常在服务器上的/ etc /中).如果已经关闭了,那么请查看php.ini文件中的open_basedir内容并注释该行(#open_base...
php header 302 move,301永久重定向讲解和设置方法
weixin_39885803的博客
03-25 774
在HTTP协议中，使用三个数字代表HTTP协议状态。HTTP状态代码是在Web服务器返回数据的第一行实现的，比如你访问http://www.baidu.com/，百度的服务器会返回的数据第一行是：HTTP/1.1 200 OK这里就说明百度返回的状态是200，协议是HTTP/1.1，状态描述是OK。大家都知道g.cn这个google的网址，这个网址会转跳到http://www.google.cn上...
curl 301解决
weixin_30508241的博客
12-10 2506
问题描述： 使用curl get访问接口返回301跳转 无法访问数据。 解决： curl_setopt($handle, CURLOPT_FOLLOWLOCATION, 1); 转载于:https://www.cnblogs.com/fanhuo/p/10097239.html...
curl 采集的时候遇到301怎么办
weixin_30293135的博客
08-15 2032
采集的时候遇到301,采集数据有错误 $ch = curl_init($url);curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);curl_setopt($ch, CURLOPT_BINARYTRANSFER,true);curl_setopt($ch, CURLOPT_HEADER, true);curl_setopt($ch,CURLOPT_EN...
curl 302重定向_Curl常用命令
weixin_39810901的博客
11-29 1894
导语Curl命令是一个利用URL规则在命令行下工作的文件传输工具。它支持文件的上传和下载，是综合传输工具，但按传统，习惯称curl为下载工具。作为一款强力工具，curl支持包括http、https、ftp等众多协议，还支持post、cookies、认证、从指定偏移处下载部分文件、用户代理字符串、限速、文件大小、进度条等特征。做网页处理流程和数据检索自动化，curl可以祝一臂之力。常用命令...
浏览器里的请求响应 301 Moved Permanently 是什么意思
最新发布
05-08
<think>好的，我需要帮助用户理解HTTP 301状态码的含义以及为什么通过浏览器下载后会影响代码直链下载的完整性。首先，我得回顾一下用户之前的问题。用户之前提到使用代码下载蓝奏云直链文件时出现不完整，但先用浏览器下载一次后，代码就能成功。之前的回答涉及到了动态验证、请求头完整性、链接时效性以及浏览器处理重定向和会话状态等因素。 现在用户的问题更具体，询问HTTP 301 Moved Permanently的含义以及为什么浏览器下载会影响代码直链下载的完整性。需要结合301状态码的特性来分析。 首先，HTTP 301是永久重定向状态码，意味着请求的资源已经被永久移动到新的URL。服务器返回301时，会在响应头中提供新的Location字段，指示新的URL。浏览器会自动处理这种重定向，转向新的URL获取资源。而如果代码中没有正确处理重定向，可能会导致请求停留在旧的URL，从而无法获取正确的资源，导致下载不完整。 接下来要考虑用户提到的现象：先用浏览器下载后，代码就能成功下载。这可能涉及到浏览器在处理301时不仅跟随重定向，还可能保存了某些状态，如Cookie或缓存，使得后续请求（包括代码中的请求）能够正确获取资源。例如，蓝奏云可能在初次访问时设置了一个Cookie，后续请求需要携带这个Cookie才能通过验证。浏览器在初次下载时保存了这个Cookie，而代码如果没有正确处理会话，可能没有携带这个Cookie，导致服务器拒绝请求或返回不完整的数据。 另外，可能涉及到服务器对同一IP的请求频率限制。浏览器下载后，可能触发了某种机制，使得服务器暂时允许该IP的后续请求，而代码在没有浏览器先访问的情况下，可能被限速或拦截。 需要进一步分析蓝奏云的具体实现机制，比如是否在初次访问时生成一个临时的下载链接，并通过301重定向到该链接。如果代码没有正确处理重定向，直接使用初始URL，而该URL可能已经过期或无效，导致下载失败。而浏览器会自动处理重定向，获取到有效的临时链接，从而成功下载。 此外，用户提到的下载不完整可能是因为服务器分块传输，而代码没有正确处理分块传输或断点续传，导致下载中断。浏览器则支持这些功能，确保文件完整下载。 需要验证这些假设，比如检查代码中的请求是否处理了重定向，是否携带了必要的请求头和Cookie，是否处理了分块传输等。同时，可能需要使用工具如curl或Postman模拟请求，查看详细的请求和响应头信息，以确定问题所在。 总结来说，HTTP 301导致资源路径变更，代码未正确处理重定向则无法获取正确的资源，而浏览器自动处理重定向并维护会话状态，使得后续请求（包括代码）能够成功。此外，服务器可能依赖会话Cookie或动态生成的参数，代码未携带这些信息时导致下载不完整。</think>### HTTP 301 Moved Permanently 状态码含义及对程序直链下载的影响分析 --- #### 一、HTTP 301 状态码的核心含义 1. **永久重定向** HTTP 301 表示请求的资源已被**永久移动**到新的 URL，客户端（如浏览器）应使用响应头中提供的 `Location` 字段值作为新的请求地址。例如： ```http HTTP/1.1 301 Moved Permanently Location: https://new-url.com/file.zip ``` 此状态码会**被浏览器缓存**，后续对原 URL 的请求将直接跳转到新地址，无需再次询问服务器[^1]。 2. **与 302/307 的区别** - **302 Found**：临时重定向，浏览器不会缓存跳转逻辑。 - **307 Temporary Redirect**：临时重定向，但强制要求保持原始请求方法（如 POST）。 301 的**永久性**使其对爬虫和缓存策略影响更大。 --- #### 二、浏览器预下载如何影响代码直链下载的完整性 当用户通过浏览器首次下载蓝奏云文件时，以下机制会触发： 1. **重定向链路补全** 蓝奏云可能通过 301 返回一个**动态生成的临时下载地址**（例如含时间戳或令牌的 URL）。浏览器自动完成跳转并下载，而代码若未处理 301 响应，则可能： - 直接请求原始 URL，但服务器已返回 301，未跟随 `Location` 导致获取无效响应。 - 示例代码未启用重定向： ```python # 未设置 allow_redirects=False 时，requests 默认跟随重定向 response = requests.get(url, allow_redirects=False) if response.status_code == 301: new_url = response.headers['Location'] # 需手动处理新地址 ``` 2. **会话状态绑定** 浏览器在首次下载时可能： - 接收并存储服务器下发的 Cookie（如 `session_id=abc123`）。 - 后续请求（包括代码发起的请求）若携带相同 Cookie，服务器会视为合法用户，否则可能返回截断数据或 403 错误。 - 代码未复用会话的后果： ```python # 错误：每次请求使用独立会话 requests.get(url) # 无 Cookie requests.get(url) # 仍无 Cookie，触发拦截 ``` 3. **缓存污染** 浏览器缓存 301 响应后，后续对原 URL 的请求会直接跳转到新地址。若代码在浏览器预下载后运行，可能因系统 DNS/HTTP 缓存而意外获取到有效地址，但这一行为**不可靠**且依赖环境。 --- #### 三、301 重定向导致下载不完整的典型场景 1. **动态令牌失效** - 浏览器首次获取的 `Location` 可能包含时效参数（如 `&token=expires_in=300`），代码若未在有效期内使用该地址，服务器会返回 403 或空数据。 - 示例：浏览器在时间窗口内完成下载，而代码因延迟请求过期 URL。 2. **协议头缺失** 301 响应后的真实下载地址可能校验： - `Referer` 必须为蓝奏云域名。 - `User-Agent` 需匹配浏览器标识。 代码若未模拟这些头部，即使跟随重定向也可能被拦截。 ```python # 需手动添加协议头 headers = {"Referer": "https://www.lanzoui.com", "User-Agent": "Mozilla/5.0"} response = requests.get(new_url, headers=headers) ``` 3. **分块下载逻辑缺失** 真实文件地址可能要求支持 `Range` 请求（断点续传），而代码若以简单 `GET` 请求下载大文件，可能因网络波动中断且无法恢复。 ```python # 错误：未实现分块下载 with open("file.zip", "wb") as f: f.write(response.content) # 单次写入，中断即失败 ``` --- #### 四、解决方案与验证方法 1. **强制处理重定向** ```python session = requests.Session() response = session.get(initial_url, allow_redirects=True) # 自动跟随 301/302 final_url = response.url # 获取最终地址 ``` 2. **逆向工程动态参数** 若蓝奏云通过 JavaScript 生成真实地址（如计算加密参数），需使用工具解析： - 使用 Selenium 执行页面脚本后提取 URL： ```python from selenium import webdriver driver = webdriver.Chrome() driver.get(initial_url) real_url = driver.execute_script("return getDownloadUrl();") ``` 3. **会话与头部模拟** ```python headers = { "User-Agent": "Mozilla/5.0", "Referer": "https://www.lanzoui.com", } session = requests.Session() session.headers.update(headers) # 首次请求获取 Cookie response = session.get(initial_url, allow_redirects=True) ``` --- ### 相关问题 1. HTTP 301 和 302 重定向对搜索引擎优化（SEO）有何不同影响？ 2. 如何通过 Python 代码实现支持断点续传的文件下载？ 3. 蓝奏云等网盘如何通过动态令牌防止资源盗链？ --- [^1]: HTTP 协议状态码定义（RFC 7231 Section 6.4） [^2]: 浏览器缓存机制与重定向处理规范 [^3]: 分块传输编码与断点续传实现（RFC 7233）
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值