- 博客(14)
- 收藏
- 关注
RSS订阅原创 hdfs standby namenode无法启动
standby namenode无法启动，webui也无法访问参考大佬的文档成功解决 standby namenode无法启动
2020-04-29 12:25:34
517
原创 hdfs 多次格式化报错
报错20/04/29 19:46:32 WARN namenode.NameNode: Encountered exception duringformat: org.apache.hadoop.hdfs.qjournal.client.QuorumException:Unable to check if JNs are ready for formatting. 1 exception...
2020-04-29 12:05:14
1193
原创 wc程序报错org.apache.hadoop.io.nativeio.NativeIO$Windows.createDirectoryWithMode0(Ljava/lang/String;I)V
问题描述：org.apache.hadoop.io.nativeio.NativeIO$Windows.createDirectoryWithMode0(Ljava/lang/String;I)V解决过程：有查了说是要把hadoop/bin目录下的hadoop.dll复制到 C:\Windows\System32我弄了之后还在报错最后发现我win安装的hadoop与idea下的hadoo...
2020-04-26 23:10:31
284
原创 spark报错java.lang.NoSuchMethodError
在执行spark程序报错java.lang.NoSuchMethodError: org.apache.hadoop.fs.FileSystemStatistics.getThreadStatistics()Lorg/apache/hadoop/fs/FileSystemStatistics.getThreadStatistics()Lorg/apache/hadoop/fs/FileSyste...
2019-09-01 16:56:28
880
原创 启动azkaban Error fetching active flows
azkaban报错Exception in thread “main” azkaban.executor.ExecutorManagerException: Error fetching active flows原因：创建好azkaban库后没有mysql>source /root/azkaban/azkaban-2.5.0/create-all-sql-2.5.0.sql...
2019-08-17 17:21:36
544
原创 sqoop连接数据库报错com.mysql.jdbc.exceptions.jdbc4.CommunicationsException: Communications link failure
报错信息java.sql.SQLException: Access denied for user 'root'@'hd00' (using password: YES) at com.mysql.jdbc.SQLError.createSQLException(SQLError.java:1078) at com.mysql.jdbc.MysqlIO.checkErrorPacket(My...
2019-08-16 18:48:42
4157
1
原创 启动ha集群两台namenode都是standby解决方案
前一天的时候运行还是正常的，今天就报错看了一下是zookeeper集群的问题关掉所有服务[root@ha01 ]#stop-dfs.sh 重新启动zookeeper集群在这中间还报过JMX enabled by default错误，原因是没有关闭所有服务[root@ha04 bin]# pwd/usr/local/zookeeper-3.4.5-cdh5.7.0/bin[...
2019-08-08 10:13:10
678
原创 在做mapreduce时报错java.lang.ExceptionInInitializerError
问题java.lang.ExceptionInInitializerError检查原因在检查完代码及配置后发现是由于windows版的hadoop环境变量的HADOOP_HOME位置配置错误，修改完成后再次运行代码就成功了。...
2019-08-04 20:20:29
708
2
原创 Hadoop的java程序报错Exception in thread "main" java.io.FileNotFoundException: File does not exis
找了半天发现是因为路径没有写全正确路径应该是E:/abc.txt注意检查路径是不是写全了，尤其是后缀！！！
2019-08-02 11:07:59
4305
3
原创 hadoop集群的搭建
第一步 搭建前的准备1. 准备四台虚拟机，修改好主机名,并分配好ip|主机名|ip ||–|--|| hd00 | 192.168.66.10 || hd01 |192.168.66.11|| hd02|192.168.66.12 || hd03 |192.168.66.13 |2. 配置主机名映射[root@hd00 ~]# vim /etc/hosts 3....
2019-08-01 18:05:14
165
原创 linux中hadoop的伪分布搭建成功后无法访问web的解决方法
无法访问web页面检查各个配置没有问题，防火墙也关闭了，网络搭建也没有问题具体检查请参考hadoop伪分布的搭建解决方法换一个浏览器访问就成功了，这个错简直mmp原因之前使用的是win10系统默认浏览器，好像系统拦截了界面，换谷歌就好了...
2019-07-31 21:03:44
1953
1
原创 Linux下配置Hadoop的伪分布环境的搭建
1.查看jps[root@master ~]# jps 7445 Jps如果出现这个则可以继续下一步2.导入Hadoop包，并放到/opt目录下3.查看Hadoop包十分导入[root@master ~]# cd /opt[root@master opt]# lltotal 485452-rw-r--r--. 1 root root 311585484 Jul 31 09:24 ...
2019-07-31 19:49:53
1003
原创 Linux下jdk的安装配置
导入jdk安装包进入/opt目录查看导入的安装包[root@master ~]# cd /opt/[root@master opt]# lltotal 485452-rw-r--r--. 1 root root 311585484 Jul 31 11:39 hadoop-2.6.0-cdh5.7.0.tar.gz-rw-r--r--. 1 root root 185515842...
2019-07-30 12:31:40
149
原创 maven今日问题及解决方案
运行报错：Request processing failed; nested exception is org.apache.ibatis.binding.BindingException: Invalid bound statement (not found): com.ssm.dao.UserDao.find前端报错：500解决方案：环境搭建出现了问题；及时检查环境搭建时的路径是否...
2019-07-19 20:49:20
199
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人