远程服务Java api hadoop hdfs 9000端口拒绝访问

最新推荐文章于 2024-04-11 14:20:25 发布
最新推荐文章于 2024-04-11 14:20:25 发布
阅读量1.4k 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hongxiao2016/article/details/90574345
版权

在服务器上运行netstat -ntlp

你会惊奇的发现它把9000端口映射到了127.0.0.1，纳尼那不凉了吗，只有内外可以访问了，但是对于50070，你会发现它映射到了0.0.0.0，所有人都可以访问，现在的问题就变成了把9000绑定到0.0.0.0，我使用的是localhost，我去把hosts文件里的127.0.0.1改为了0.0.0.0，应该可以了吧，然而，结果。。。更意外了，全变为127.0.0.0了，全凉了，最终呢，我把hosts文件里的所有删了，只留下0.0.0.0 127.0.0.1，的确，这样是可以实现了，不过，总觉得这样不太好。。。

hongxiao2016
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
elcipse java hadoop操作hdfs的api
09-29
在Hadoop生态系统中，Java API是开发者与HDFS（Hadoop Distributed File System）进行交互的主要方式。本资料主要涵盖了如何使用Eclipse环境进行Java开发，利用Hadoop的HDFS API来操作分布式文件系统。以下是对这些...
hadoop+hive+mapreduce的java例子
12-27
基于hadoop的Hive数据仓库JavaAPI简单调用的实例，关于Hive的简介在此不赘述。hive提供了三种用户接口：CLI，JDBC/ODBC和 WebUI CLI，即Shell命令行 JDBC/ODBC 是 Hive 的Java，与使用传统数据库JDBC的方式类似 Web...
在运行hadoop是出现Master的9000端口拒绝访问的情况
weixin_30685047的博客
11-04 1021
出现9000端口拒绝访问的情况有可能是防火墙没有开放9000端口，可以选择关闭防火墙或者卸载防火墙，如果还是无法解决这种情况可能是因为hadoop的启动顺序不对。 应该按照如下得顺序启动 Step2: cd #your_hadoop_path Step3: ./bin/hadoop namenode -format Step4: ./sbin/start-all.sh 转载于:https:...
hadoop fs.default.name 9000 端口在外面连不上
野兽
03-06 478
hadoop fs.default.name  9000 端口在外面连不上  由于 第一行  node03  服务会绑定地一行  最外的地址访问不到   127.0.0.1       node03  localhost.localdomain   localhost    ::1     node03  localhost6.localdomain6 localhost6 192.1...
安装hadoop，9000端口访问不了
最新发布
maodun
04-11 714
如果master上的datanode可以连接namenode ，而其他机器上的datanode 访问不了namenode，那么就是防火墙没有关闭。用命令 netstat -nlp | grep 9000 查看 9000端口情况。CentOS上的关闭防火墙。其他系统的方式不一样。
java远程连接hadoop
陈伟键的博客
08-31 5463
最近在学习hadoop，在linux上面启动hadoop后准备用java操作hadoop，看了中文的资料都是坑~ String HDFS_PATH = "hdfs://192.168.203.128:9000"; //要连接的hadoop Configuration configuration = new Configuration(); configuration.set("fs.
解决hdfs 运行在9000端口外界不能访问
Smileyan's blog
10-28 9610
问题描述 默认情况下，hdfs运行在 127.0.0.1:9000，也就是说只运行在本地，而不是0.0.0.0，像Tomcat不管在云服务器还是虚拟机上，启动后我们直接可以用ip加端口地址访问，但是hdfs不可以。 这样带来的麻烦就是：每次都需要打包jar，然后上传到云服务器或者虚拟机中运行。不能直接在eclipse或者idea上运行。 解决方法 关键字： 内网穿透 工具使用：natapp 基本...
外网无法访问hdfs文件系统
qq_39551064的博客
11-28 316
标题报错java.net.ConnectException: Connection timed out: no further information 由于本地测试和服务器不在一个局域网,安装的hadoop配置文件是以内网ip作为机器间通信的ip. 在这种情况下,我们能够访问到namenode机器, namenode会给我们数据所在机器的ip地址供我们访问数据传输服务, 但是返回的的是datano...
hive远程连接工具和jar.zip
02-28
这些JAR包通常包括Hive的元存储库服务（Hive Metastore）、Hive驱动程序（Hive Driver）以及可能的Hadoop相关库，如Hadoop Common、HDFS和YARN等。 压缩包中的“hive远程连接工具和jar”很可能包含了所有这些必要的...
Hadoop权威指南（中文版）2015上传.rar
10-12
Hadoop守护进程的地址和端口 Hadoop的其他属性 创建用户帐号 安全性 Kerberos和Hadoop 委托令牌 其他安全性改进 利用基准测试程序测试Hadoop集群 Hadoop基准测试程序 用户的作业 云上的Hadoop Amazon EC2上的Hadoop ...
如何在Windows下的eclipse调试Hadoop2.2.0分布式集群
08-06
这需要在Hadoop集群的每个节点上开启远程调试选项，并在Eclipse中配置相应的远程调试端口。 8. **日志与跟踪**： Hadoop提供详细的日志系统，可以通过HDFS或控制台查看运行日志，这对调试非常有帮助。同时，可以...
HDFS之五：Hadoop 拒绝远程 9000 端口访问
now
10-29 9476
（PS）访问9000端口的前提是hadoop集群已启动。 报错原因 防火墙没有关闭 主节点9000端口没有打开 主节点9000端口打开了，但是不允许远程访问（一般是这个） 第一：查看防火墙状态 第二：查看主节点9000端口是否打开 netstat -tlpn 检查主节点9000端口是否打开 没有打开的 打开的 第三、 查看主节点9000端口是否允许远程访问，可使用telnet ip port 检验 一般而言，只要启动了hadoop集群，9000端口就已经开放。 如果9..
Hadoop本地开发，9000端口拒绝访问
wangzhongtian的博客
05-18 3425
通过查看端口发现，9000端口只允许本机访问，我远程连接当然会提示拒绝访问了。可能是Hadoop为了保证集群的安全性，默认的是本集群之间的访问，只允许配置的某一个IP访问吧。于是我想能不能把这个端口放开，允许所以IP访问。于是我把hosts中的文件做了下面的修改。    将hadoop-master指向的IP地址指向0.0.0.0，然后重启hadoop查看端口占用。  参考 http:
解决外网无法访问HDFS文件系统①
12-29 2573
本地HDFS调用API访问云服务器Hadoop问题解决
windows11IDEA连接虚拟机的Hadoop（主要解决9000端口无法访问问题，winutil、jdk等的下载默认完成）
weixin_54388231的博客
10-21 2370
windows11IDEA连接虚拟机的Hadoop
Hadoop： 主节点9000端口拒绝访问Call From *** to hadoop1:9000 failed on connection exception
Alecor的博客
07-29 5026
今天在使用Java联调试hdfs的时候，参数都对了，但是就是连接不上hadoop，后面找到原因了。 是自己的hadoop配置文件错误， 在配置hadoop：core-site.xml 文件时，主要 hdfs地址要写成服务器的IP地址，不要写成localhost获取127.0.0.0 以下是我的部分代码 public static FileSystem getFileSystem(Map<String, Object> params, String userName) throws Exc
hadoop操作出现：9000 failed on connection exception java.net.ConnectException拒绝访问（已解决）
begefefsef的博客
04-03 9323
准备查看haddop上的文件，输入： hadoop fs -ls / 出现了： ls: Call From yx/127.0.1.1 to 0.0.0.0:9000 failed on connection exception: java.net.ConnectException: 拒绝连接; For more details see: http://wiki.apache.org/hadoop/ConnectionRefused 显示9000端口拒绝访问 从配置文件可以知道，hadoop访问本机
[Hadoop学习][Zookeeper学习]关于127.0.0.1/＜unresolved＞:2181的解决方法
weixin_43978037的博客
03-11 2214
hadoop+hbase+zookeeper 伪分部配置 zookeeper只用自行安装的版本 如题，与大多数报错不同的是，127.0.0.1后面多了一个，一直找不出问题。 zookeeper日志也无报错 直到找到这位大佬https://blog.csdn.net/richie696/article/details/112910751 是因为Hadoop自带的zookeeper与自行安装的版本不一致导致的。资源库里显示Hadoop自带版本仅为3.4 而我安装的版本则为3.6 因此只需移除hadoop的低版本
hadoop使用java api操作hdfs
03-27
Hadoop是一个分布式计算框架，它的核心组件包括HDFS（Hadoop分布式文件系统）和MapReduce。在Hadoop中，Java API是操作HDFS的主要方式之一。 以下是使用Java API操作HDFS的步骤： 1. 导入Hadoop依赖项 ```java import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoop.fs.Path; ``` 2. 配置Hadoop环境 ```java Configuration conf = new Configuration(); conf.set("fs.defaultFS", "hdfs://localhost:9000"); ``` 3. 获取FileSystem对象 ```java FileSystem fs = FileSystem.get(conf); ``` 4. 创建目录 ```java Path path = new Path("/test"); fs.mkdirs(path); ``` 5. 上传文件 ```java Path srcPath = new Path("/local/file.txt"); Path destPath = new Path("/test/file.txt"); fs.copyFromLocalFile(srcPath, destPath); ``` 6. 下载文件 ```java Path srcPath = new Path("/test/file.txt"); Path destPath = new Path("/local/file.txt"); fs.copyToLocalFile(srcPath, destPath); ``` 7. 删除文件或目录 ```java Path path = new Path("/test/file.txt"); fs.delete(path, true); // true表示递归删除目录 ``` 以上是使用Java API操作HDFS的基本步骤，可以根据实际需求进行修改和扩展。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值