关于爬取图片时遇到下载盗链图的解决方式

最新推荐文章于 2022-10-20 15:57:11 发布
最新推荐文章于 2022-10-20 15:57:11 发布
阅读量2.2k 收藏 4
点赞数 1
分类专栏： Python网络爬虫 文章标签： 爬虫 Python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_39848830/article/details/79486071
版权
在写爬虫爬取图片时，经常会碰到盗链图的产生，无法打开，这是网站设置的反爬机制之一。为了解决这类问题，需要在头文件headers中添加Referer属性值，目的是告诉服务器当前请求是从哪个页面请求过来的 
'Referer':'网址'
Picreferer = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.108 Safari/537.36',                       
'Referer':'http://i.meizitu.net'}  
res=requests.get(img_url,headers=Picreferer)


 


                

        

        

    




    

      

        

            

              
                
                  weixin_39848830
                
              
            

            

                关注
              
            

        

        

          
    
            
  • 
              
                
                
                
                
                    1
                
              
              
    点赞
    
            
    • 
            
  • 
              
                
                
                
              
              
    踩
    
            
    • 
            
  • 
              
                
                
                
                
                    4
                
              
              
    
                
    
                  
                    收藏
                  
                
    
              
    
              
    
                
    
                  觉得还不错?
                  
                    一键收藏
                  
                 
                
    
              
    
            
    • 
          
  • 
            
    
              
              
            
    
              
              
              
                  2
              
            
            
    评论
    
          
    • 
          
  • 
          
    • 
          
  • 
            
              
            
              
    
            
              
                
            
    
          
    • 
        

      

      

            

                专栏目录
          










                



	

		

			

				
					
采集破解防盗链图片显示的方法

				
			

			

				

					01-18
				

			

		

		

			
				
是PHP破解防盗链的代码的源码，解决采集图片盗链不显示的方法，很简单，特别实用。

			
		

	



                

              
                



	

		

			

				
					
三招两式 解决图片盗链无法查看问题

				
			

			

				

					10-28
				

			

		

		

			
				
有些粗心大意的人转贴时，简单地把图片复制了过来。可如果该网站的图片设置为防止外部链接，我们遇到转载的好帖，又找不到原出处，难道只有哀叹的份么？

			
		

	



                


  
              

                


	

		

			

				
					
下载防盗链图片的关键

				
			

			

				

					weixin_34050519的博客
				

				

					07-04
					
					513
					
				

			

		

		

			
				
下载防盗链图片的关键在于设置 Request.Referer 属性。主要是伪装成是图片所在页面发出的请求。假设图片所在页面地址为urlPage图片地址为 srcImg那么应该// 创建一个URL请求
            Uri uriImg = new Uri(srcImg);
            HttpWebRequest req = (HttpWebRequest)WebRequ...

			
		

	





	

		

			

				
					
php如何防止图片盗用/盗链的两种方法

				
			

			

				

					weixin_34260991的博客
				

				

					10-31
					
					428
					
				

			

		

		

			
				
如今的互联网，采集网站非常多，很多网站都喜欢盗链/盗用别人网站的图片，这样不仅侵犯网权，还导致被盗链的网站消耗大量的流量，给服务器造成比较大的压力，本文章向大家介绍php如何防止图片盗用/盗链的两种方法，需要的朋友可以参考一下。
图片防盗链有什么用?防止其它网站盗用你的图片，浪费你宝贵的流量。本文章向大家介绍php防止图片盗用/盗链的两种方法

Apache图片重定向方法
设置image...

			
		

	



		

			
		



	

		

			

				
					
爬虫遇到图片禁止访问（如403）

				
			

			

				

					lf_breeze的博客
				

				

					07-08
					
					8781
					
				

			

		

		

			
				
今年一直在做爬虫，有时候碰到图片禁止访问的情况，以前一直以为不能解决。前两天在网上看了下资料。
对于低级的图片防盗链可以通过改变Referer来解决。
访问图片资源：
  url = new URL(src);
                URLConnection con = url.openConnection();
                con.setConnectTim

			
		

	





	

		

			

				
					
php下载防盗链图片,php中图片、文件下载防盗链技巧

				
			

			

				

					weixin_31919471的博客
				

				

					03-24
					
					382
					
				

			

		

		

			
				
//存放图片的文件夹在服务器上的绝对地址$imgRootPath="pics/2005/11/";//例外允许连接的网址，注意:自身域名不需要填入，设定为肯定可以连接图片$excludeReferArr=array("www.163.com","163.com");doJudgeReferer($excludeReferArr);//判断是否$imgRelPath=$_REQUEST['id'];...

			
		

	





	

		

			

				
					
使用Apache的htaccess防止图片被盗链的解决方法

				
			

			

				

					12-19
				

			

		

		

			
				
为了解决这个问题，Apache提供了一种名为`.htaccess`的配置文件，通过它我们可以实现防止图片被盗链的策略。本文将详细讲解如何利用`.htaccess`防止图片被非法引用。  首先，我们需要了解`.htaccess`文件。这是一个...

			
		

	





	

		

			

				
					
PHP防止图片盗用(盗链)的方法小结

				
			

			

				

					10-21
				

			

		

		

			
				
总结，PHP防止图片盗用（盗链）可以通过修改Apache服务器配置或者借助PHP文件读取图片的方式实现。这两种方法都能有效地限制非授权访问，保护网站的流量资源。根据实际需求和服务器环境，可以选择适合的方式来实施...

			
		

	





	

		

			

				
					
php如何控制用户对图片的访问 PHP禁止图片盗链

				
			

			

				

					10-22
				

			

		

		

			
				
主要介绍了php如何控制用户对图片的访问 PHP禁止图片盗链,需要的朋友可以参考下

			
		

	





	

		

			

				
					
微信文章图片防盗链，下载到本地

					
热门推荐

				
			

			

				

					hoftime
				

				

					09-14
					
					1万+
					
				

			

		

		

			
				
前段时间搞微信开发，其中用到微信中的公众号二维码图片，当时没有在意直接将图片路径放进了数据库，调取时发现图片被做防盗链了。
当时想图片存储在本地比较合适，于是按照curl 模拟微信场景读取图片下载到本地，这样也就避过了微信的检测机制。

    /**
     * 将微信图片保存到本地
     * @param string $url            微信的图片地址
     * 

			
		

	





	

		

			

				
					
如何快速解决图片防盗链问题

				
			

			

				

					01-20
				

			

		

		

			
				
相信很多人，不管是私人也好，seo也好，站长也好，还是小推手也好，都会不时越到“防盗链图片”这个问题，有时候需要把整个网页文章拷贝进去，但是复制过去的图片，到自己的网站这边，刷新一下就没了~~~给自己活着给客户的体验很是不爽！呵呵，没办法，人家不希望自己的东西被人拿走，但这些东西也不是很知识产权之类的~~~所以，现在很多大网站都搞这套~~

			
		

	





	

		

			

				
					
破解图片盗链JS

				
			

			

				

					06-18
				

			

		

		

			
				
这是一个不错的破解图片盗链JS。利用html就可以破解盗链。

			
		

	





	

		

			

				
					
Java爬虫小例子，爬取小网站，突破防盗链下载图片

				
			

			

				

					02-02
				

			

		

		

			
				
通过Java爬虫，爬取网站内容（图片以及信息）并记录，在需要的时候可以下载，并且突破网站的防盗链

			
		

	





	

		

			

				
					
【原创】C#下载具有防盗链的图片示例

				
			

			

				

					赵庆明老师
				

				

					10-20
					
					405
					
				

			

		

		

			
				
一般防盗链，只做到了域名级别，因此为image_ref_url 提供一个域名地址就行（比如http://libopac.cdut.edu.cn），域名后面随便填写都行。其实破解也很简单，也就是方位图片的时候，给它加一个referer参数。接下来，我们使用C#来下载这个图片（添加合法的referer参数）一些网站为了防止自己的图片被其它网站引用，添加了防盗链功能。这是一本书的封面，如果你直接打开的话，会保一个错误信息。比如你现在访问这个连接。

			
		

	





	

		

			

				
					
实现简单图片下载功能及防盗链

				
			

			

				

					
				

				

					11-11
					
					281
					
				

			

		

		

			
				
1.防盗链的基本原理就是就是一句话：通过判断request请求头的refer是否来源于本站。
2.HTTP Referer是header的一部分，当浏览器向web服务器发送请求的时候，一般会带上Referer，告诉服务器我是从哪个页面链接过来的，服务器籍此可以获得一些信息用于处理。

@Override
    protected void service(HttpServlet...

			
		

	





	

		

			

				
					
解决图片的防盗链导致图片显示不出来（适合所有的防盗链图片）

				
			

			

				

					weixin_30791095的博客
				

				

					07-25
					
					2078
					
				

			

		

		

			
				
图片的防盗链因为之前使用了豆瓣的图书 API 用着的时候web 系统突然发现所有的图片都访问不了、然后谷歌一查原来豆瓣采取了防盗链。
问题很简单，就是我希望在自己的页面里用 \<img src=”xxxx” \/> 来引用其他网站的一张图片，但是他的网站设置了防盗链的策略，会在后台判断请求的Referrer属性是不是来自于一个非本域名的网站，如果来源不是本域名就返回 403 forb...

			
		

	





	

		

			

				
					
图片防盗链解决方法

				
			

			

				

					小唯一的博客
				

				

					01-24
					
					4485
					
				

			

		

		

			
				
方法1.

写一个服务，把微信图片下载到本地，然后放在静态文件目录中，修改微信图片中的域名为自己的IP或域名，备注：程序请求时，referer需要时空的

方法2.

使用七牛云的镜像存储功能，例如：https://mmbiz.qlogo.cn/mmbiz/...
将mmbiz.qlogo.cn改为七牛提供的https域名:ob7x3eh4t.qnssl.com
即:https://ob7x3eh...

			
		

	





	

		

			

				
					
关于爬虫爬取图片被防盗链的解决

				
			

			

				

					u013123635的博客
				

				

					11-05
					
					1万+
					
				

			

		

		

			
				
由于一些不可描述的原因，在使用jsoup爬取图片时被防盗链了。 
解决办法是URL url = new URL("");
        // 获得连接
        URLConnection connection = url.openConnection();
        connection.setRequestProperty("Referer", "http://www.xxx.co

			
		

	





	

		

			

				
					
img前端渲染数据库图片链接方式

					
最新发布

				
			

			

				

					05-18
				

			

		

		

			
				
一般来说，前端渲染数据库中的图片链接需要通过后端接口实现。以下是一种常见的实现方式： ...需要注意的是，为了防止图片盗链，一些网站会对外部请求图片进行限制，需要在请求头中添加 Referer 信息才能正常获取图片。

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		
评论 2

	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值