hadoop伪分布式安装教程 第一步:下载hadoop并上传到Linux(ubuntu) Apache官网链接如下: https://hadoop.apache.org/releases.html 下载好后,使用WinSCP上传到Linux 如对WinSCP有疑问:可点击这里 https://blog.csdn.net/weixin_46028577/article/details/106275272 第二步:安装hadoop(操作都是在最高权限下执行的) 命令 : 第三步:配置hadoop相关文件 检查IP-主机映射文件 ping 主机名(按Ctrl+C退出) 进入hadoop目录(按实际安装路径为准) 配置 hadoop-env.sh文件(vi hadoop-env.sh) 若对Linux下安装jdk有疑问,可看如下教程: 配置core-site.xml文件(vi core-site.xml) 配置 hdfs-site.xml(vi hdfs-site.xml) 配置yarn-env.sh(vi yarn-env.sh) 配置mapred-site.xml(若没有 mapred-site.xml,将 mapred-site.xml.template改名为 mapred-site.xml,然后vi mapred-site.xml) yarn-site.xml(vi yarn-site.xml) 第四步:配置SSH无密码登录 编辑/etc/ssh/sshd_config文件(允许root登录、允许密码认证(第56行的行首井号#去掉)) 重启 ssh服务 使用ssh-keygen命令产生公钥与私钥对(输入命令, 接着按三次Enter键) 用ssh-copy-id将公钥复制到远程机器中(依次输入yes, root用户密码) 重启 ssh服务 第五步:格式化namenode,并启动进程查看结果 进入hadoop目录 执行HDFS文件系统格式化 启动单节点集群(注意,sbin/start-all.sh在较高版本已废弃) 查看进程 注意:若遇到节点(进程)启动不全的情况,可参考如下文件,查找原因 第六步:查看50070和8088 先关闭防火墙 游览器打开 第七步:关闭进程(养成好习惯) 至此,hadoop的下载,安装,和配置就完成了 第一步:下载hadoop并上传到Linux(ubuntu) Apache官网链接如下: https://hadoop.apache.org/releases.html 下载好后,使用WinSCP上传到Linux 如对WinSCP有疑问:可点击这里 https://blog.csdn.net/weixin_46028577/article/details/106275272 第二步:安装hadoop(操作都是在最高权限下执行的) 命令 :