大数据
大数据
程序员june
share,share,enjoy!
展开
-
Initialization failed for Block pool <registering> Datanode Uuid
从日志上看,加粗的部分说明了问题datanode的clusterID 和 namenode的clusterID 不匹配。解决办法:根据日志中的路径,cd /home/hadoop/tmp/dfs能看到 data和name两个文件夹,将name/current下的VERSION中的clusterID复制到data/current下的VERSION中,覆盖掉原来的clusterID让两个保持一致然后重启,启动后执行jps,查看进程20131 SecondaryNameNode2原创 2021-05-08 20:47:02 · 356 阅读 · 0 评论 -
启动hive报错:java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument(ZLjava/lang
从报错信息来看:一,java.lang.NoSuchMethodError 原因:1.系统找不到相关jar包2.同一类型的 jar 包有不同版本存在,系统无法决定使用哪一个二,com.google.common.base.Preconditions.checkArgument根据百度可知,该类来自于guava.jar三,查看该jar包在hadoop和hive中的版本信息 hadoop-3.2.1(路径:hadoop\share\hadoop...原创 2021-05-09 16:36:59 · 1997 阅读 · 0 评论 -
yum提示Another app is currently holding the yum lock; waiting for it to exit...
使用yum安装计划任务功能,结果提示:# yum -y install vixie-cronLoaded plugins: fastestmirror, refresh-packagekit, securityExisting lock /var/run/yum.pid: another copy is running as pid 25960.Another app is currently holding the yum lock; waiting for it to exit...可能原创 2021-05-08 22:10:35 · 218 阅读 · 0 评论 -
bash: cd: /root/.ssh: No such file or directory
centos7 ssh设置密钥时出现的问题,解决方法为:先用yum安装ssh,然后再生成密钥1.yum install -y openssl openssh-server2.ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa原创 2021-05-07 18:36:45 · 4347 阅读 · 1 评论 -
ssh免密登录配置无效失败原因的汇总分析
我们在大数据环境搭建过程中,经常需要配置ssh免密登录;按照网上找的资料设置了,可还是登录需要输入密码,这是为什么呢?下面跟着我的思路走:1.以root用户身份登录执行ssh-keygen一路回车,按默认配置即可。2.然后将rsa.pub文件拷贝到目标机器上ssh-copy-id root@192.168.1.x3.多数情况下,可以登录成功。但是也会出现配置不正确,导致失败的时候。1.检查authorized_keys文件权限,并设置为700chmod 700a.原创 2021-04-19 22:52:14 · 2506 阅读 · 1 评论 -
centos 操作文件夹出现权限不够怎么办。
出现localhost: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,passwor的问题,如图所示由于你不root不是这个权限组的用户,所以root无法改变这个问题1、在命令行使用命令“ll”或者“ls -a”,可以查看文件或者文件的权限:-rw-r--r--. 1 root root 6 Nov 9 16:42 a.txt1其中“-rw-r–r--”表示权限,一共有十个字符。第一个字符,如果是“-...原创 2021-04-19 22:00:52 · 11046 阅读 · 0 评论 -
Hadoop安装包镜像地址
http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-3.1.4/原创 2021-04-19 17:29:21 · 1482 阅读 · 0 评论 -
使用centos7 修改hosts文件保存不成功
当centos修改hosts文件使用wq!保存时,发生无法保存的情况,说明当前用户没有该权限,需要切换用户,使用su命令输入密码之后即可原创 2021-04-19 14:19:22 · 1287 阅读 · 0 评论