![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
如此生活丶
这个作者很懒,什么都没留下…
展开
-
yarn指向了java
本地安装了java、hadoop和nodejs,并配置了环境变量,但是hadoop的bin目录下存在yarn命令,所以使用nodejs的yarn命令启动项目会出现找不到类,此时键入yarn -version也会显示java的版本。 解决办法是使用yarnpkg,它等同于yarn。 ...原创 2021-12-04 11:03:44 · 220 阅读 · 0 评论 -
hadoop集群脚本
1、集群分发脚本 #!/bin/bash #验证参数 if(($#!=1)) then echo 请输入要分发的单个文件! exit; fi #获取分发文件的绝对路径 dirpath=$(cd `dirname $1`; pwd -P) filename=`basename $1` echo 要分发的文件的路径是:$dirpath/$filename #获取当前的用户名 user=$(whoami) #循环执行rsync分发文件到集群的每条机器 for((i=101;i原创 2021-02-13 07:52:07 · 93 阅读 · 0 评论 -
Hadoop运行环境搭建
分布式集群搭建步骤分析: 1)安装JDK 2)配置环境变量 3)安装Hadoop 4)配置环境变量 5)配置集群 6)单点启动 7)配置ssh 8)群起并测试集群 1、安装JDK 2、hadoop安装 1)Hadoop下载地址: https://archive.apache.org/dist/hadoop/common/hadoop-2.7.2/ 2)环境变量: ##HADOOP_HOME export HADOOP_HOME=/opt/module/hadoop-2.7.2 export PATH=$P原创 2021-02-10 00:52:29 · 195 阅读 · 0 评论