hadoop访问ssh非默认端口问题

最新推荐文章于 2023-09-14 16:21:38 发布
最新推荐文章于 2023-09-14 16:21:38 发布
阅读量639 收藏
点赞数 1
分类专栏： 分布式技术 VIP 大数据 文章标签： hdfs hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/wzygis/article/details/114532076
版权
VIP 同时被 3 个专栏收录
40 篇文章 26 订阅 ¥19.90 ¥99.00
订阅专栏
分布式技术
33 篇文章 0 订阅
订阅专栏
大数据
10 篇文章 1 订阅
订阅专栏
本文档介绍了在Linux系统中由于安全加固将SSH端口改为2222后，启动Hadoop遇到的问题及解决方案。通过修改hadoop-env.sh配置文件，确保Hadoop能正确连接到新的SSH端口。
摘要由CSDN通过智能技术生成

启动报错

[root@vpt00043s1a15 sbin]# cd /usr/local/hadoop-3.1.4/sbin
[root@vpt00043s1a15 sbin]# start-dfs.sh
Starting namenodes on [vpt00043s1a15]
Last login: Mon Mar  8 10:42:05 CST 2021 from 10.225.252.137 on pts/0
vpt00043s1a15: ssh: connect to host vpt00043s1a15 port 22: Connection refused
Starting datanodes
Last login: Mon Mar  8 14:51:46 CST 2021 on pts/0
vpt00043s1a15: ssh: connect to host vpt00043s1a15 port 22: Connection refused
vpt00043s1a13: ssh: connect to host vpt00043s1a13 port 22: Connection refused
vpt00043s1a14: ssh: connect to host vpt00043s1a14 port 22: Connection refused
Starting secondary namenodes [vpt00043s1a15]
Last login: Mon Mar  8 14:51:46 CST 2021 on pts/0
vpt00043s1a15: ssh: connect to host vpt00043s1a15 port 22: Co
了解本专栏 订阅专栏 解锁全文
0X码上链
关注
专栏目录
订阅专栏
Hbase-2.4.11_hadoop-3.1.3集群_大数据集群_SSH修改默认端口22为其他端口---记录025_大数据工作笔记0185
添柴程序猿的专栏
01-29 558
在以下目录中:/opt/module/hadoop-3.1.3/bin/myhadoop.sh。需要修改/opt/module/hbase-2.4.11/conf/hbase-env.sh。在以下目录中:/opt/module/hadoop-3.1.3/bin/kfk.sh。在以下目录中:/opt/module/hadoop-3.1.3/bin/xsync。在以下目录中:/opt/module/hadoop-3.1.3/bin/zk.sh。中,找到对应的hadoop-env.sh文件。
ssh 访问非默认端口、图形转发
苏朋达
05-21 803
问题 1)修改主机B的sshd服务端口 2)将端口号改为 8022 3)重启 sshd 服务，确认监听状态 4)从主机A远程登入主机B 5)恢复主机B的sshd服务端口 6)从主机A再次远程登入主机B，且支持图形程序 方案 对于ssh服务，它有两个配置文件一个是/etc/ssh/sshd_config服务端配置文件，另一个是/etc/ssh/ssh_config客户端配置文件，经常用到是/etc/...
ssh连接不使用默认端口
简讯的读书笔记
11-03 928
不使用默认的22端口，如何使用命令行连接远程服务器？
Hadoop集群 SSH不同端口问题
qq_42913729的博客
06-03 976
在云服务器上搭建Hadoop集群的过程中一般ssh默认端口22不会开发 这个时候. 如果集群之间通过ssh链接的过程中，就会出现22端口拒绝的问题，但是如果直接修改，配置打开22端口号会被恶意扫描到。 所以只能修改本地的ssh默认端口 遇到了非默认端口的配置 在/root/.ssh/下面做一个配置文件config 将服务器信息和端口都加入其中，实现了非默认端口的免密登录 #服务器1 Host xm-bigdata01 Hostname 192.168.0.5 Port 23 User root Identi
SSH免密登录服务器（非默认端口）
qq_42341984的博客
03-03 429
SSH免密登录服务器 ssh-copy-id -i .ssh/id_rsa.pub -p [port] User@HostName 例如： ssh-copy-id -i .ssh/id_rsa.pub -p 19222 zjy@10.108.1.1
Hadoop设置ssh免密登录操作
abys_01的博客
09-27 279
SSH免密登录 1.首先创建用户 这里我们在三个虚拟机中都创建hadoop用户 useradd 用户名 （创建用户） passwd 用户名 （修改用户密码） 2.给新用户权限 使用vi /etc/sudoers 进入sudoers中 在红框处写 用户名 ALL=(ALL) NOPASSWD:ALL 在另两台虚拟机中重复上述操作 3.免密码设置 ssh-keygen -t rsa 然后一直回车得到密钥 shh-copy-id 用户名@主机名 来分配密钥 记得要给三个主机都发一遍 注意红框的yes，如
hadoop(1)ssh连接与hadoop搭建
cxy的博客
11-09 2506
Hadoop2.7.3单机安装配置参考http://blog.csdn.net/qjk19940101/article/details/705441971. 环境Ubuntu 16.04 vmware hadoop 2.7.3 java 1.7.0_75master：192.168.224.135 slave1：192.168.224.131 slave2：192.168.224.1342. 步骤...
Hadoop ssh配置设置
wenyusuran的专栏
05-15 1072
一.   配置机器名  配置/etc/hosts和/etc/sysconfig/network 注意：NameNode的hosts文件必须有其slaves指定的所有节点的机器名 二. ssh设置 （hadoop中需要在namenode 和 datanode 中直接连接集群内的机器，需要配置ssh） NameNode节点运行 ssh-keygen -t dsa -P '' -f ~/.
hadoop3.1.1：启动hadoop进程提示ssh 22端口不能连接
weixin_33863087的博客
05-08 2385
分析：由于在生产环境下，ssh的端口被修改成220，不是使用的默认端口，但是hadoop在启动相应进程的时候，使用的ssh默认端口 解决： 1、命令行(临时)，这种方式会导致关闭当前终端，该值失效。 export HADOOP_SSH_OPTS="-p 220" 2、永久修改：把上述的命令添加到hadoop的hadoop-env.sh文件，添加以后就可以正常启动hadoop进程。 ...
Hadoop集群、Hbase集群指定ssh端口
yangrui1985123的博客
12-04 2321
Hadoop集群、Hbase集群指定ssh端口 在生产环境中，为了安全起见，往往会禁掉ssh默认的22端口，分为几个步骤： 1）修改ssh的端口 vi /etc/ssh/sshd_config 在这个配置里修改端口为 port 2222 去掉上面图片显示的注释 重启ssh服务 service sshd restart 2）指定hadoop集群的端口 例如端口改为2222 在hadoop_env....
解决./start-dfs.sh还需要输入ssh密码的问题
weixin_64402596的博客
09-07 335
机器全部已经设置了ssh免密，查看了一下~/.ssh/authorized_keys 发现我6台机器只有2~6机器的公钥，没有本台机器的公钥。命令：cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys。启动hdfs:./start-dfs.sh,提示需要密码。重新启动hdfs：./start-dfs.sh。
[Hadoop] start-dfs.sh ssh报错
最新发布
weixin_51654781的博客
09-14 567
start-dfs.sh ssh报错 Permission denied (publickey 'execstack -c ', or link it with '-z noexecstack'. WARN util.NativeCodeLoader: Unable to load native-
当修改了SSH默认端口后 HDFS HA模式无法故障转移怎么办？
Mr_JWYang
03-23 424
最近遇到一个用到HDFS的项目，于是在测试环境安装了一套HDFS。在测试HA的故障转移的功能时发现namenode无法故障转移，经过一番认证排查发现是由于修改了SSH默认端口导致的。 于是乎就去翻官方文档，翻啊翻，终于看到这么一段话，如下： Optionally, one may configure a non-standard username or port to perform the SSH. One may also configure a timeout, in milliseconds,
阿里云搭建hadoop集群ssh端口问题
weixin_41876523的博客
06-28 453
启动hadoop进程提示ssh localhost port 22 Connection refused
subian1261的博客
07-02 7091
hadoop配置完成，用start-all.sh启动时提示错误： localhost: ssh: connect to host localhost port 22: Connection refused 【错误原因】分析：由于在生产环境下，ssh的端口被修改成220，不是使用的默认端口，但是hadoop在启动相应进程的时候，使用的ssh默认端口。 【解决问题过程】 1、网上大部分原因是未安装ssh造成的，采用ps -e|grep ssh命令查看，发现服务器上已经安装ssh。 2、ssh localhost
启动spark集群
wk022的专栏
07-22 2184
启动Spark集群 1，登陆spark Master节点，启动$SPARK_HOME/sbin/start-all.sh，start-all.sh内容如下： sbin="`dirname "$0"`" sbin="`cd "$sbin"; pwd`" TACHYON_STR="" while (( "$#" )); do case $1 in --with-tachyon)
改 hadoop ssh 端口
灯火阑珊处
01-19 725
启动hadoop，但ssh 端口不是默认的22怎么样？好在它可以配置。在conf/hadoop-env.sh里改下。如：export HADOOP_SSH_OPTS="-p 1234"
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

0X码上链

你的鼓将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值