PHP通过GuzzleHttp获得链接的HTTP状态码常见问题

最新推荐文章于 2024-09-25 16:51:44 发布
最新推荐文章于 2024-09-25 16:51:44 发布
阅读量1.2k 收藏
点赞数
分类专栏： 爬虫 PHP 文章标签： php
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yw5201314/article/details/125414535
版权
PHP 同时被 2 个专栏收录
25 篇文章 0 订阅
订阅专栏
爬虫
2 篇文章 0 订阅
订阅专栏

最近需要做个检测数据库里面广告的各种链接是否正常，所以准备写个任务，定时检查素有广告含有的链接是否正常，检查依据主要是HTTP/HTTPS返回的状态码是否是非200；

1.不要偷懒 必须设置一下 GuzzleHttp 的 headers属性（从浏览器中copy进去）；

2.设置链接重定向的属性：

'allow_redirects' => [
    'referer'         => false,
    'track_redirects' => true
]
3.设置'verify' => false（重点）；如果不设置的话 极有可能在https链接检测的时候，这个链接的证书过期或者异常了，GuzzleHttp直接就抛异常了，无法得到http的状态码；

                

        

        

    

  


    

      

        

            

              
                
                  积累是金
                
              
            

            

                关注
              
            

        

        

          
      

      

            

                专栏目录
          









                



	

		

			

				
					
PHP语法摘要

				
			

			

				

					生活在别处
				

				

					05-11
					
					1461
					
				

			

		

		

			
				
PHP（PHP: Hypertext Preprocessor的缩写，中文名：“超文本预处理器”）是一种通用开源脚本语言。语法吸收了C语言、Java和Perl的特点，入门门槛较低，易于学习，使用广泛，主要适用于Web开发领域。PHP是将程序嵌入到HTML（标准通用标记语言下的一个应用）文档中去执行，执行效率比完全生成HTML标记的CGI要高许多。1. 在linux下，直接输入php后可以开始输入php代码（仍然需要以结尾），输入完毕后输入Ctrl+D开始执行。

			
		

	



                

            
              



	

		

			

				
					
php捕获http异常,php  - 处理Guzzle异常并获取HTTP正文

				
			

			

				

					weixin_42206399的博客
				

				

					03-23
					
					1414
					
				

			

		

		

			
				
虽然上面的答案是好的，但它们不会处理网络错误，因为Mark提到BadResponseException只是ClientException和ServerException的超类。 但RequestException也是BadRequestException的超类。 这不仅会捕获400和500错误，还会捕获网络错误。 所以，假设您要求下面的页面，但您的网络正在播放，您的捕获期待BadResponseE...

			
		

	



              


  
              

                


	

		

			

				
					
PHP使用GuzzleHttp进行HTTP请求

				
			

			

				

					zhouchang111的博客
				

				

					11-02
					
					2549
					
				

			

		

		

			
				
2，设置过期时间和跳过ssl验证。3，post请求 ：json。1,composer安装。3,delete请求。

			
		

	





	

		

			

				
					
PHP的guzzlehttp/guzzle库在碰到各种异常时的场景

					
最新发布

				
			

			

				

					qq_37638125的博客
				

				

					09-25
					
					644
					
				

			

		

		

			
				
经过测试得知在http状态码为1xx, 2xx, 3xx时, 会在111处输出返回在http状态码为4xx, 5xx时, 会在222处被捕获在目标服务不可达或其他异常时会在333处被捕获。

			
		

	



		

			
		



	

		

			

				
					
PHP guzzle 报错 `400 Bad Request`

				
			

			

				

					JFENG14的博客
				

				

					01-20
					
					1504
					
				

			

		

		

			
				
post请求，请求接口报错：resulted in a `400 Bad Request` response

原代码：


$this->guzzleService->post( $url, [
            'headers' => [
                'Content-Type' => 'application/json;charset=utf-8'
            ],
            'form_params' => $dat

			
		

	





	

		

			

				
					
使用Guzzle执行HTTP请求

				
			

			

				

					daxingsuo3996的博客
				

				

					07-01
					
					862
					
				

			

		

		

			
				
Guzzle是一个PHP的HTTP客户端，用来轻而易举地发送请求，并集成到我们的WEB服务上。Guzzle提供了简单的接口，构建查询语句、POST请求、分流上传下载大文件、使用HTTP cookies、上传JSON数据等等。

安装
使用Composer安装：
composer require guzzlehttp/guzzle

或者编辑项目的composer.json文件...

			
		

	





	

		

			

				
					
Guzzle: PHP HTTP 客户端

				
			

			

				

					gitblog_00020的博客
				

				

					03-15
					
					493
					
				

			

		

		

			
				
Guzzle: PHP HTTP 客户端
 guzzleGuzzle, an extensible PHP HTTP client项目地址:https://gitcode.com/gh_mirrors/gu/guzzle Guzzle 是一个用于处理 HTTP 请求的轻量级 PHP 库。它提供了一种简单的方式来发送 HTTP 请求并接收响应，同时还支持异步操作和中间件。
项目简介
Guzzle 是...

			
		

	





	

		

			

				
					
基于PHP的大佬19楼论坛抓取程序php版源码.zip

				
			

			

				

					09-03
				

			

		

		

			
				
7. **异常处理与错误控制**：在编写爬虫时，应考虑可能遇到的各种错误，如网络连接问题、HTTP状态码错误、编码问题等，并设置相应的异常处理机制。  8. **反爬策略应对**：许多网站会设置反爬机制，如验证码、User-...

			
		

	





	

		

			

				
					
attendly-php:PHP与Attendly API的接口

				
			

			

				

					05-09
				

			

		

		

			
				
6. **RESTful API设计**：REST（Representational State Transfer）是一种常见的API设计风格，了解REST原则，如URI资源定位、HTTP方法对应操作、状态码含义等，对于理解Attendly API会很有帮助。  7. **版本控制**：...

			
		

	





	

		

			

				
					
PHP实例开发源码—乱搜图片爬虫采集.zip

				
			

			

				

					11-23
				

			

		

		

			
				
2. **HTTP协议**：网络爬虫工作原理基于HTTP/HTTPS协议，因此开发者需要理解HTTP请求方法（GET、POST）以及HTTP响应状态码。例如，通过发送GET请求获取网页内容，或者使用POST请求模拟用户提交表单。  3. **DOM解析*...

			
		

	





	

		

			

				
					
VM-CentOS-8+Linux8中编译安装php-8.0.9无错详解教程

				
			

			

				

					圣哥的-Blog
				

				

					08-19
					
					1095
					
				

			

		

		

			
				
VM-CentOS-8+Linux8中编译安装php-8.0.9无错详解教程

文章目录VM-CentOS-8+Linux8中编译安装php-8.0.9无错详解教程@[toc]P-01）  系统 &环境P-02）  安装前准备P-03）  编译安装【oniguruma】P-04）  编译安装【libzip】P-05）  安装依赖P-06）  编译安装【libxml2】P-07）  编译安装【libmcrypt】P-08）  编译安装【mhash】P-09）  编译安装【mcrypt】P-10）  编

			
		

	





	

		

			

				
					
curl抓取http头中Location中指明的url

				
			

			

				

					weixin_34198583的博客
				

				

					01-25
					
					291
					
				

			

		

		

			
				
const CURLOPT_MAXREDIRS = 5;
function curlGet($url) {        　　　　　$ch = curl_init();  
        curl_setopt($ch, CURLOPT_URL, $url);  
        curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);   
 ...

			
		

	





	

		

			

				
					
GuzzleHttp

				
			

			

				

					qq_37521420的博客
				

				

					04-03
					
					1206
					
				

			

		

		

			
				
1、GuzzleHttp从HTTP调用获取cookie的值


$client = new \GuzzleHttp\Client();
$jar = new \GuzzleHttp\Cookie\CookieJar();
$res = $client->request('GET', 'https://xxx.com',[
    'cookies' => $jar
]);

$cookJar = $jar->getIterator();  //获取的是一个GuzzleHttp\Cookie

			
		

	





	

		

			

				
					
【小TIPS】基于guzzlehttp库实现广告监测地址检查

				
			

			

				

					Martian
				

				

					08-08
					
					503
					
				

			

		

		

			
				
在广告投放系统中，任何一个投放的广告，都是要有监测地址的，它存在的目的是为了上报用户行为信息（imp、click），一般地，一个监测地址里，会包含多家监测信息，原因在于多家监测是为了避免一家监测机构无法上报导致数据无法成功统计到，二是为了数据的准确性，一家监测地址无法证明上报的准确性，两家或多家则可以进行相互印证，保证上报数据的正确、合理。那么问题来了，怎么统计呢？
一、统计方案
给定一个广告监测地址，如果判断有几方监测呢，方法有以下几种：
第一种：监测地址里包含多少个http/https信息
substr

			
		

	





	

		

			

				
					
解决使用Guzzle包token错误重试时修改query的token值

				
			

			

				

					qq_45490619的博客
				

				

					11-15
					
					624
					
				

			

		

		

			
				
1.关键环境

laravel版本：5.4
guzzlehttp/guzzle：6.3.3

2.额外知识

使用 Guzzle 中间件进行请求重试的demo地址：https://learnku.com/articles/31855
Guzzle源码学习地址：https://segmentfault.com/p/1210000011674167/read


有兴趣的可以学习它的源码

3.相关代码
（1）修改GuzzleHttp\Psr7\Uri的源码，新增一个修改当前对象的query属性的方法
 /**

			
		

	





	

		

			

				
					
关于php：如何在Guzzle中读取响应有效的URL?6.0(Guzzle获取重定向后的实际请求地址URL)

				
			

			

				

					slongzhang的博客
				

				

					02-13
					
					758
					
				

			

		

		

			
				
查阅了一大堆的资料，终于在码农乐园“关于php：如何在Guzzle中读取响应有效的URL?6.0”找到了6.1的获取重定向后的地址方法了

			
		

	





	

		

			

				
					
php new http 报错,thinkphp 5 Guzzle Http 使用 返回 非 200 状态 抛出异常，捕获异常。抑制报错...

				
			

			

				

					weixin_36381298的博客
				

				

					03-10
					
					556
					
				

			

		

		

			
				
$client = new GuzzleHttpClient();try {//正常请求$res = $client->post('http://api.domain.com/getList.json', ['multipart' => [['name'     => 'image_file','contents' => 'abc123'],['name'     =&gt...

			
		

	





	

		

			

				
					
php 的 curl请求

				
			

			

				

					qq_26959879的博客
				

				

					06-08
					
					449
					
				

			

		

		

			
				
<?php

namespace app\controller;

use app\BaseController;
use GatewayClient\Gateway;
use GuzzleHttp\Client;
use GuzzleHttp\Pool;
use think\facade\Log;
use GuzzleHttp\Psr7\Request;


class Index ex...

			
		

	





	

		

			

				
					
PHP类HttpStatus实现HTTP状态码管理

				
			

			

				

					
				

			

		

		

			
				
资源摘要信息:"httpstatus.php 是一个 PHP 类文件，用于表示和操作 HTTP 状态码。HTTP（超文本传输协议）状态码是一种在服务器响应客户端请求时用来表示请求成功、重定向、客户端错误或服务器错误等状态的三位数字...

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		
评论 1

	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值