云计算和大数据
joey小天使
功夫震九州,不如一壶酒。
展开
-
在配置hadoop3.1.3中出现的错误DataNode不能启动
原因多次进行格式化导致各个节点之间的版本号不同,集群不能正常启动。当在NameNode中使用了格式化hdfs namenode -formar导致NameNode的版本号发生变化。当我们使用hadoop namenode -format格式化namenode时,会在namenode数据文件夹(这个文件夹为自己配置文件中dfs.name.dir的路径)中保存一个current/VERSION文件,记录clusterID,datanode中保存的current/VERSION文件中的clustre原创 2021-11-17 21:53:42 · 1535 阅读 · 0 评论 -
在配置hadoop3.1.3中出现的错误ERROR: Attempting to operate on yarn nodemanager as root ERROR
这个在开启hdfs和yarn服务时可能出现,在关闭使用脚本关闭hdfs和yarn服务时也有可能出现解决办法将start-dfs.sh,stop-dfs.sh(在hadoop安装目录的sbin里)两个文件顶部添加以下参数HDFS_DATANODE_USER=rootHADOOP_SECURE_DN_USER=hdfsHDFS_NAMENODE_USER=rootHDFS_SECONDARYNAMENODE_USER=root将start-yarn.sh,stop-yarn.sh(在ha原创 2021-11-17 21:08:37 · 3345 阅读 · 0 评论