解决ubuntu16.04版本的hadoop无法访问web的8088和8020端口

最新推荐文章于 2024-03-30 11:15:44 发布
最新推荐文章于 2024-03-30 11:15:44 发布
阅读量1.3k 收藏 1
点赞数
文章标签： hadoop ubuntu
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43943841/article/details/106292418
版权
在Ubuntu 16.04环境下，启动Hadoop后只能访问50070端口，无法访问8088和8020端口。该问题可能与防火墙设置和hosts文件有关。解决方法包括关闭防火墙，检查防火墙状态，并在/etc/hosts中删除127.0.1.1的条目。完成这些步骤后，重新启动Hadoop，8088和8020端口将正常工作。
摘要由CSDN通过智能技术生成

问题：启动完hadoop能访问50070端口web，但不能访问8088端口和8020端口。

我的配置：

  • hadoop版本2.7.3
  • ubuntu版本16.04 server

这个问题应该只出现在ubuntu16.04版的，在18.04版本里是没有的
先去50070端口web看这里
空白

如果是红框里没有内容的，回到主节点关闭hadoop：
1.先把参与hadoop运行的节点都关闭防火墙，

sudo ufw disable

再查看防火墙状态，如果状态为“inactive（不活动）”，说明防火墙已关闭

sudo ufw status

关闭防火墙

2.去/etc/hosts里，把 127.0.1.1 XXX 这一行都删去，XXX是当前操作的节点的名称
这一步所有参与hadoop运行的节点都要操作


                

                
                
        

        

    

  


        

            

                    
                      最低0.47元/天 解锁文章
                        
                    
            

        

    

      

        

            

              
                
                  Same Yeu
                
              
            

            

                关注
              
            

        

        

          
      

      









                



	

		

			

				
					
Hadoop集群配置之后浏览器无法访问问题

				
			

			

				

					lyc0424的博客
				

				

					06-13
					
					5159
					
				

			

		

		

			
				
环境：Ubuntu16.04

最近在做spark分布式集群学习，hadoop先配置好之后通过浏览器访问默认50070端口来监测管理

但是在网页输入master:50070链接之后浏览器并不能访问，首先检查50070端口是否开启？
ps -aux |grep 50070



结果显示已经开启

然后再测试一下：



感觉并没有什么问题，那可能是其他细节出了问题，通过查资料发现如果在虚拟机内部输入master:50070则能正常访问hdfs页面





而在虚拟机外部的本地主机下由于未在windows

			
		

	



                

              
                



	

		

			

				
					
虚拟机上的hadoop localhost:8088，localhost:50070均不能访问

				
			

			

				

					kakazai.cn
				

				

					03-12
					
					6036
					
				

			

		

		

			
				
文章目录问题原因解决方案经验
问题
用虚拟机安装ubuntu，在上面装hadoop，配置完所有文件后，jps，可以看到主机和其他节点了，想要访问http://localhost:50070/，http://localhost:8088/，但两个都不能访问
原因
找了很多文章，有的说是防火墙没关闭，但我的防火墙是关闭的：sudo ufw status。
有的说要修改yarn的配置文件，我没修改，因为...

			
		

	



                


  
              

                


	

		

			

				
					
Ubuntu16.04系统下安装Hadoop,50070端口不能正常启动的原因

				
			

			

				

					aimaomi123的博客
				

				

					07-04
					
					1100
					
				

			

		

		

			
				
临近毕业季，尝试安装了Hadoop，但是通过访问localhost:50070/没有反应，通过命令netstat -antup | grep 50070查看端口信息，发现50070端口没有开启，安装教程参考的是https://blog.csdn.net/windghoul/article/details/52655032，感觉有些步骤完全是没有必要的，又通过上网查资料发现了问题所在。https:/...

			
		

	





	

		

			

				
					
关于Ubuntu配置hadoop中master机可以访问50070和8088，但是slave机却不能访问的原因

				
			

			

				

					qq_45622193的博客
				

				

					03-26
					
					855
					
				

			

		

		

			
				
由于防火墙开启导致slave机无法访问master机的端口
解决方法：
1、允许8080与8081端口流量通过public区域，立即生效且永久生效：firewall-cmd --permanent --zone=public --add-port=8080-8081/tcp
firewall-cmd --reload
2、关闭防火墙：
systemctl status firewalld  //查...

			
		

	



		

			
		



	

		

			

				
					
访问HDFS遇到无法访问8020端口的问题，访问被拒绝

				
			

			

				

					zc1024792301的博客
				

				

					06-23
					
					1万+
					
				

			

		

		

			
				
今天运行了一个简单的从Hadoop URL读取数据的程序



hadoop jar test.jar test.URLcat hdfs://localhost/data/123.txt

结果显示这个错误



Exception in thread "main" java.net.ConnectException: Call From hadoop/192.168.1.190 to hadoo...

			
		

	





	

		

			

				
					
ubuntu16.04 开启22端口设置允许root用户登录

				
			

			

				

					夫君子之行,静以修身,俭以养德,非淡泊无以明志,非宁静无以致远.
				

				

					05-23
					
					2826
					
				

			

		

		

			
				
Ubuntu 16.04.1 LTS安装完成后，无法使用xshell进行远程登录，Telnet Ubuntu系统的22端口也不通。

解决方法
安装ssh服务
超级管理员安装命令
apt-get install openssh-server    
非管理员安装命令
sudo apt-get install openssh-server
安装过程中出现是否需要安装，直接Y。


检查ssh...

			
		

	





	

		

			

				
					
Hadoop   HDFS基本操作（ubuntu16.04  、Hadoop 3.0.3）

				
			

			

				

					菜鸟不会飞
				

				

					10-20
					
					2251
					
				

			

		

		

			
				
hdfs shell的基本操作以及hdfsWeb查看文件

在安装好hadoop集群并成功的启动了hdfs之后，我们就可以利用hdfs对文件进行操作了，一下是对文件的一些基本操作

特别注意：访问HDFS目录时，一定要带有/  否则命令会出错！

hdfs基本操作

1、查询命令

　　hdfs dfs -ls /   查询/目录下的所有文件和文件夹

　　hdfs dfs -ls -R 以递归的...

			
		

	





	

		

			

				
					
Mac系统下使用VMware Fusion12.1.0安装Ubuntu16.04虚拟机，并搭建Hadoop+Hive+HBase+Spark伪分布集群

				
			

			

				

					sddfnsff的博客
				

				

					02-28
					
					2272
					
				

			

		

		

			
				
@Mac系统下安装Ubuntu16.04并安装Hadoop+Hive+HBase+Spark伪分布集群
欢迎使用Markdown编辑器
你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章，了解一下Markdown的基本语法知识。
新的改变
我们对Markdown编辑器进行了一些功能拓展与语法支持，除了标准的Markdown编辑器功能，我们增加了如下几点新功能，帮助你用它写博客：

全新的界面设计 ，将会带来全新的写作体验；
在

			
		

	





	

		

			

				
					
Ubuntu16.04环境下基于Hadoop分布式集群YARN模式下的TensorFlowOnSpark平台搭建

				
			

			

				

					Fly Me To The Moon
				

				

					11-26
					
					595
					
				

			

		

		

			
				
本次实验环境是基于Ubuntu16.04的一台服务器，在上面创建3个Docker容器，容器的系统也是Ubuntu16.04，并以此搭建TensorFlowOnSpark深度学习分布式平台。

一 Ubuntu基本配置

1.1 安装ssh

打开终端或者服务器版命令行。

查看是否安装（ssh）openssh-server，否则无法远程连接。


sshd
sudo apt install ope...

			
		

	





	

		

			

				
					
基于ubuntu 16.04搭建CDH环境

				
			

			

				

					hkl15111093042的博客
				

				

					11-02
					
					976
					
				

			

		

		

			
				
准备过程
1. 环境：
Ubuntu16.04 desktop x 5 台
ip和主机名：
192.168.1.83 master
192.168.1.81 slave1
192.168.1.82 slave2
192.168.1.84 slave3
192.168.1.88 slave4
搭建过程使用普通用户hadoop（若为root用户，所有指令去掉sudo即可）。
2. 要下载的安装包：
下...

			
		

	





	

		

			

				
					
ubuntu查看端口占用

				
			

			

				

					weixin_30567225的博客
				

				

					08-07
					
					49
					
				

			

		

		

			
				
查看端口号

sudo netstat -ltnp | grep :80

结束进程

sudo kill pid


转载于:https://www.cnblogs.com/savokiss/p/3897598.html

			
		

	





	

		

			

				
					
HDFS文件上传：8020端口拒绝连接问题解决！

					
热门推荐

				
			

			

				

					IAProgramer的博客
				

				

					05-27
					
					2万+
					
				

			

		

		

			
				
忙了一整天，一直在解决hdfs上传文件时的错误，昨天最后有了一些头绪，但是没来得及验证，今天上午终于验证了自己的想法，从而顺利解决了困扰了自己许久的问题。以这个问题为契机，自己对Hadoop的配置文件重新进行了梳理，顺便加深了对于HDFS的理解。首先来看一直困扰自己的问题，该问题是在自己尝试向HDFS上传本地文件的时候发生的：
CopyFromLocal: Call to localhost/1

			
		

	





	

		

			

				
					
【已解决】伪分布式Hadoop服务已经开启，但是无法访问http://localhost:9870（缺少NameNode进程）\http://localhost:8088

					
最新发布

				
			

			

				

					Yaoyao2024的博客
				

				

					03-30
					
					2807
					
				

			

		

		

			
				
使用如下方法启动成功hadoop服务进入相应文件夹首先停止启动所有的节点，使用命令行启动stop-all.sh脚本使用jps命令查看当前hadoop运行貌似没问题其实这里就是有问题！！！后续解决方法里面说继续打开，查看web界面显示无法连接到。

			
		

	





	

		

			

				
					
hadoop完全分布式部署无法访问namenode的8020端口解决方案

				
			

			

				

					liuyanmin专栏
				

				

					06-03
					
					1万+
					
				

			

		

		

			
				
遇到的问题：我搭建的是完全分布式系统，克隆了5台虚拟机，1台启动namenode节点，3台启动datanode节点，1台启动secondarynamenode节点，启动start-dfs.sh和start-yarn.sh脚本时，datanode节点日志报错，错误信息：2017-06-03 19:05:39,452 INFO org.apache.hadoop.ipc.Client: Retryin...

			
		

	





	

		

			

				
					
Hadoop集群时进入hadoop:9870无法访问的问题

				
			

			

				

					qq_52874015的博客
				

				

					03-20
					
					8013
					
				

			

		

		

			
				
最近在学习时，遇到了集群后无法进入网页的问题。看了好多帖子，他们都出现在cmd里ping不到的问题，但我的ping是可以的



后来我使用命令关闭了防火墙，发现防火墙状态仍是开启的，于是我使用了service命令


service iptables stop

然后


service iptables status

看到控制台里的情况

Active是inactive的，说明防火墙关闭了，此时就可以访问了。

此外，如果防火墙方面没问题，就去找一下你的hdfs-site.xml文件，里面是否有如下几

			
		

	





	

		

			

				
					
Ubuntu llinux系统中防火墙的安装和开放打开8668端口8080

				
			

			

				

					
				

				

					05-27
					
					2639
					
				

			

		

		

			
				
Ubuntu系统中防火墙的使用和开放端口 
  
目录 
1、Ubuntu查看防火墙的状态... 2 
2、Ubuntu开启防火墙... 2 
3、Ubuntu添加开放SSH端口... 3 
4、Ubuntu防火墙常用命令... 5 
4.1、查看ufw防火墙的状态... 5 
4.2、启用ufw防火墙... 6 
4.3、重启ufw防火墙... 6 
4.4、关闭ufw防火墙... 6 
4.5、设置外...

			
		

	





	

		

			

				
					
Hadoop集群能打开50070端口网页不能打开8088端口网页

				
			

			

				

					幸运的Alina的博客
				

				

					05-10
					
					9820
					
				

			

		

		

			
				
最近开始搭建Hadoop集群，一开始很顺利，后面慢慢的一步步爬坑，记录下遇到的问题和解决方法。

在Hadoop 集群启动后，发现直接访问50070端口的网页没有问题，如图(博主这里还做了端口映射，所以看到的端口和实际端口不同)：



但是直接访问8088端口就直接找不到 ：

经过一步步的排查，记录下排查解决的方法：

中间排查步骤如下：

1. 查看hadoop 启动的进程

因为8088...

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		评论	
	

	
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值