![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
海边看花开
越努力越幸福
展开
-
hbase写入数据时挂掉
在hbase中查看表时,出现下面错误原因可能时由于zookeeper不稳定导致的处理办法:重启zookeeper,重启hbasestop-hbase.shstart-hbase.sh原创 2020-05-30 23:02:55 · 442 阅读 · 0 评论 -
启动spark时出现:failed to launch org.apache.spark.deploy.worker.Worker:
[root@master spark-1.6.0-bin-hadoop2.6]# ./sbin/start-all.shstarting org.apache.spark.deploy.master.Master, logging to /usr/local/src/spark-1.6.0-bin-hadoop2.6/logs/spark-root-org.apache.spark.deploy...原创 2020-03-08 12:52:57 · 3924 阅读 · 0 评论 -
Hadoop2.6简单集群搭建
1 环境准备centos7安装包: jdk1.7.0_45.tgz, hadoop-2.6.1.tar.gz三台机器的IP:master: 192.168.37.100slave1: 192.168.37.101slave2: 192.168.37.1022 关闭防火墙检查防火墙状态: systemctl status firewalld.service关闭防火墙: ...原创 2020-03-06 22:10:53 · 127 阅读 · 0 评论 -
Hbase集群关闭时,报错
执行关闭hbase集群命令时: ./stop-hbase.sh出现stopping hbasecat: /tmp/hbase-root-master.pid: No such file or directory解决办法: 修改hbse-env.sh文件export HBASE_PID_DIR=/var/hadoop/pids重新启动hbase集群,集群已正常启动...原创 2020-01-08 23:45:47 · 840 阅读 · 2 评论 -
Hbase安装完成后,web打不开
版本: 0.98check配置后发现配置没问题后考虑重启过几次虚拟机,可能是防火墙为关闭导致:永久性关闭防火墙,重启hbase,正常打开web页面chkconfig iptables off # 永久性关闭防火墙...原创 2020-01-08 23:40:27 · 2206 阅读 · 0 评论 -
HDFS命令
[-ls <path>] # hadoop fs -ls / 查看路径下的文件 [-lsr <path>] # Hadoop ...原创 2020-01-02 21:35:09 · 117 阅读 · 0 评论 -
记录学习mapreduce时出现的一个错误
执行代码,查看log,出现如下错误INFO org.apache.hadoop.mapred.TaskInProgress: Error from attempt_201912100452_0009_r_000002_0: java.lang.RuntimeException: PipeMapRed.waitOutputThreads(): subprocess failed with code...原创 2019-12-25 22:45:35 · 158 阅读 · 0 评论 -
hadoop搭建完成后,记录执行wordcount遇到的坑
1 Error Launching job : org.apache.hadoop.mapred.SafeModeException: JobTracker is in safe mode解决办法:关闭安全模式 hadoop dfsadmin -safemode leave2 /usr/bin/hadoop-config.sh: No such file or directory...原创 2019-11-20 21:31:31 · 364 阅读 · 0 评论