python爬取网页的时11004错误

已于 2023-09-04 15:12:47 修改
阅读量1.1w 收藏 2
点赞数 2
分类专栏： Python 文章标签： python 爬虫 error11004
于 2017-09-04 22:17:30 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/y363893017/article/details/77843280
版权
本文记录了在Python爬虫过程中遇到的11004错误，作者通过检查URL是否存在并使用try-except来避免网络问题。在爬取图片时，对请求的图片URL进行了状态码检查，确保可以成功下载。最终，问题在urllib库中得到解决，代码适用于Python3.6.2环境。
摘要由CSDN通过智能技术生成 
 

# -*- coding;utf-8 -*- import requests import os # import urllib.request url = "http://pic.sogou.com/pics?"   def http_page(tag, page): par = [] for x in range(0, 48 * page + 48, 48): par.append({
 "query": tag

                

        

        

    




        

            

                    
                      最低0.47元/天 解锁文章
                        
                    
            

        

    

      

        

            

              
                
                  y363893017
                
              
            

            

                关注
              
            

        

        

          
    
            
  • 
              
                
                
                
                
                    2
                
              
              
    点赞
    
            
    • 
            
  • 
              
                
                
                
              
              
    踩
    
            
    • 
            
  • 
              
                
                
                
                
                    2
                
              
              
    
                
    
                  
                    收藏
                  
                
    
              
    
              
    
                
    
                  觉得还不错?
                  
                    一键收藏
                  
                 
                
    
              
    
            
    • 
          
  • 
            
    
              
              
            
    
              
              
              
                  1
              
            
            
    评论
    
          
    • 
          
  • 
          
    • 
          
  • 
            
              
            
              
    
            
              
                
            
    
          
    • 
        

      

      

            

                专栏目录
          










                



	

		

			

				
					
解决python pip 安装错误问题 Errno 11004

				
			

			

				

					weixin_43129170的博客
				

				

					01-12
					
					3538
					
				

			

		

		

			
				
解决python 在使用pip命令安装时的errno 11004错误
dos pip install ***  报错如下：
WARNING: Retrying (Retry(total=0, connect=None, read=None, redirect=None, status=None)) after connection broken by ‘NewConnectionError(’&l...

			
		

	



                

              
                



	

		

			

				
					
python数据分析：[Errno 11004] getaddrinfo failed

				
			

			

				

					Jinnnnnny的博客
				

				

					06-08
					
					1148
					
				

			

		

		

			
				
python数据分析：[Errno 11004] getaddrinfo failed
写这段代码开始出现报错
参考https://blog.csdn.net/python__reported/article/details/105859937
博主的相同问题，发现是dns被屏蔽
最后百度方法修改dns
https://jingyan.baidu.com/article/2c8c281d6170630008252afb.html
问题解决
、、、
[1]: https://blog.csdn.net/pyt

			
		

	



                


  
              

                


	

		

			

				
					
蓝易云 - 如何解决urllib.error.URLError: urlopen error Errno 11004 getaddrinfo failed的问题

					
最新发布

				
			

			

				

					高性价比服务器就选：蓝易云
				

				

					06-01
					
					325
					
				

			

		

		

			
				
当你在使用Python的urllib库进行网络请求时，可能会遇到这样的错误：urllib.error.URLError: urlopen error Errno 11004 getaddrinfo failed。这个错误的意思是，你试图访问的URL的DNS解析失败了。也就是说，Python试图找到你提供的URL对应的IP地址，但是没有找到。以上就是解决urllib.error.URLError: urlopen error Errno 11004 getaddrinfo failed问题的方法。

			
		

	





	

		

			

				
					
python爬虫之urlError异常处理

				
			

			

				

					finna_xu的博客
				

				

					03-29
					
					8405
					
				

			

		

		

			
				
1.URLError
URLError产生的原因：
(1)网络无连接，即本机无法上网
(2)连接不到特定的服务器
(3)服务器不存在


import urllib.request
import urllib.error
from urllib.request import urlopen
request=urllib.request.Request('http://www.xxxx

			
		

	



		

			
		



	

		

			

				
					
Python爬虫教程——入门五之URLError异常处理

				
			

			

				

					华秋实的专栏
				

				

					09-05
					
					3327
					
				

			

		

		

			
				
大家好，本节在这里主要说的是URLError还有HTTPError，以及对它们的一些处理。1.URLError首先解释下URLError可能产生的原因：
  
  网络无连接，即本机无法上网
  连接不到特定的服务器
  服务器不存在
  
在代码中，我们需要用try-except语句来包围并捕获相应的异常。下面是一个例子，先感受下它的风骚import urllib2requset = urllib

			
		

	





	

		

			

				
					
《python数据分析基础》：[Errno 11004] getaddrinfo failed

					
热门推荐

				
			

			

				

					python__reported的博客
				

				

					04-30
					
					1万+
					
				

			

		

		

			
				
《python数据分析基础》第6.4 seaborn的第三个图“成对变量之间的散点图与单变量直方图”
'''成对变量散点图和单变量直方图'''
iris = sns.load_dataset('iris')
sns.pairplot(iris)

在写这个代码时就存在一个疑惑，这个图的代码怎么没有数据或者说值，其他的可视化的图都会有值的导入，即使没有现成数据，也会使用pandas进行随机生成，例如...

			
		

	





	

		

			

				
					
通过python爬取网页图片

				
			

			

				

					09-12
				

			

		

		

			
				
本文将深入探讨如何使用Python来爬取网页中的图片，这是一个常见的任务，对于数据分析师、网站开发者或者任何需要大量图片资源的人来说都十分实用。  首先，我们需要了解Python中的几个关键库，它们在爬虫开发中扮演...

			
		

	





	

		

			

				
					
浅谈Python爬取网页的编码处理

				
			

			

				

					09-21
				

			

		

		

			
				
Python爬取网页时，编码处理是一个关键步骤，因为网页的编码方式多种多样，不正确的处理会导致乱码。本文主要探讨如何解决Python爬虫在处理网页编码时遇到的问题。  首先，我们要理解编码的基本概念。在计算机中，...

			
		

	





	

		

			

				
					
Python爬取网页信息的示例

				
			

			

				

					09-27
				

			

		

		

			
				
本示例将深入讲解如何使用Python来爬取网页信息，以一个实际例子——爬取《Nameberry》网站上的名字评论内容为例。  首先，我们需要确认要爬取的网址。在这个例子中，我们从首页开始，逐层深入，找到包含所需信息的...

			
		

	





	

		

			

				
					
python的爬虫案例爬取网页

				
			

			

				

					01-15
				

			

		

		

			
				
8. **异常处理**：在编写爬虫时，需要考虑可能出现的异常情况，如网络错误、解析错误等，应使用`try-except`语句进行异常捕获和处理。  9. **多线程与异步爬虫**：为了提高爬取效率，可以使用Python的`threading`库...

			
		

	





	

		

			

				
					
Python解决下载nltk语料库报11004错误

				
			

			

				

					weixin_45994317的博客
				

				

					07-09
					
					3359
					
				

			

		

		

			
				
Python解决下载nltk语料库报11004错误
之前一段时间做词云项目，要下载nltk语料库，但在下载语料库时出现报错11104。在网上看到很多种答案，第一个可能是路径的问题，第二个可能是证书的问题，第三个可能是服务器没响应的问题。但都没能解决到11104错误问题。
后来自己在网上下载网友们分享出来的语料库包，解压到默认路径nltk_data文件夹里。
首先输入下载代码：



在Roaming文件夹下创建nltk_data文件夹，把下载的语料库包解压到nltk_data文件夹里，里面所有的压缩包全都压

			
		

	





	

		

			

				
					
urllib.error.URLError: ＜urlopen error [Errno 11004] getaddrinfo failed＞

				
			

			

				

					weixin_43847295的博客
				

				

					02-08
					
					2505
					
				

			

		

		

			
				
sns画箱型图时遇到的问题

			
		

	





	

		

			

				
					
python 安装库getaddrinfo failed_python 出现socket.gaierror: [Errno 11004] getaddrinfo failed错误...

				
			

			

				

					weixin_35715440的博客
				

				

					02-03
					
					1598
					
				

			

		

		

			
				
python 出现socket.gaierror: [Errno 11004] getaddrinfo failed错误报错详情：…Traceback (most recent call last):File “D:/JiCaiZhuanTi/Case/All_run_test.py”, line 48, inSendEmail.send_file(new_repor)File “D:\JiCai...

			
		

	





	

		

			

				
					
解决Python报错：URLError: ＜urlopen error [Errno 11004] getaddrinfo failed＞

				
			

			

				

					qq_39842253的博客
				

				

					05-10
					
					1万+
					
				

			

		

		

			
				
原因
获取地址信息失败，通常是由于自动选择的DNS服务器不行
解决方法
更换DNS服务器
控制面板（win+R+control） -> 网络和Internet


打开网络共享中心


打开当前连接的网络，以wifi为例


打开属性


打开Internet协议版本4


选择使用特定DNS服务器地址，并设置为114.114.114.114



...

			
		

	





	

		

			

				
					
成功解决urllib.error.URLError: ＜urlopen error [Errno 11004] getaddrinfo failed＞

				
			

			

				

					近期请国内外头部出版社可尽快私信博主！——心比天高，仗剑走天涯，保持热爱，奔赴向梦想！低调，谦虚，自律，反思，成长，还算是比较正能量的博主，公益免费传播……内心特别想在AI界做出一些可以推进历史进程影响力的东西(兴趣使然，有点小情怀，也有点使命感呀)…
				

				

					07-31
					
					3586
					
				

			

		

		

			
				
​
成功解决urllib.error.URLError: 

目录

解决问题

解决方法

解决思路


解决问题
seaborn.load_dataset函数使用时出现urllib.error.URLError: 

解决方法
urllib 错误 URL 错误：

			
		

	





	

		

			

				
					
URLError: ＜urlopen error [Errno 11004] getaddrinfo failed＞调用seaborn-data无法使用

				
			

			

				

					一个电子信息嵌入式的学习笔记
				

				

					08-09
					
					3434
					
				

			

		

		

			
				
URLError: ＜urlopen error [Errno 11004] getaddrinfo failed＞调用seaborn-data无法使用

			
		

	





	

		

			

				
					
关于 Failed to establish a new connection: [Errno 11004] getaddrinfo failed',))的问题

				
			

			

				

					weixin_30641465的博客
				

				

					12-13
					
					5955
					
				

			

		

		

			
				
今天写接口测试的时候报了一个11004的错误，看了一下错误提示错误提示如下：


看了一下连接路径发现原来是自己的粗心导致的：配置url的时候少了一个/，原来的是这样的：


后面改了一下路径就可以请求成功了，记一下


转载于:https://www.cnblogs.com/fjy49/p/10114385.html...

			
		

	





	

		

			

				
					
解决SHAP报错：URLError: ＜urlopen error [Errno 11004] getaddrinfo failed＞

				
			

			

				

					m0_63790372的博客
				

				

					04-16
					
					979
					
				

			

		

		

			
				
SHAP（SHapley Additive exPlanations）是一个流行的Python库，用于解释机器学习模型的预测。当你遇到`URLError: ＜urlopen error [Errno 11004] getaddrinfo failed＞`这样的错误时，通常意味着Python在尝试访问某个URL时遇到了网络连接问题。`getaddrinfo`是一个系统调用，用于解析主机名为IP地址，而`Errno 11004`表示获取地址信息失败。你的计算机可能没有连接到互联网，或者网络连接不稳定。

			
		

	





	

		

			

				
					
python爬取网页信息 gui 项目

				
			

			

				

					11-06
				

			

		

		

			
				
Python爬取网页信息的GUI项目可以通过以下步骤来实现：  1. 导入所需的模块：首先，我们需要导入Python的requests模块用于发送HTTP请求。同时，还需要导入BeautifulSoup模块用于解析HTML网页内容。  2. 设计GUI界面...

			
		

	



              



  
“相关推荐”对你有帮助么？

  

      
    
          
  • 
              
    
                  
                  
              
    
              
    非常没帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    没帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    一般
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    有帮助
    
          
    • 
          
  • 
              
    
                  
                  
              
    
              
    非常有帮助
    
          
    • 
      

      

      

          
          提交
      

      

  




          




        



    





    



      

      

        
      

      





	

		
评论 1

	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值