wszhtc-CSDN博客

原创 CentOS 7.2 配置 sftp

1、新建用户组sftpgroupadd sftp2、新建用户sftp并且设置不能ssh登陆，指定组名和主目录useradd -s /sbin/nologin -g sftp -d /home/sftp sftp3、设置目录的权限chown root /home/sftpchmod -R 755 /home/sftp4、修改配置文件/etc/ssh/sshd_config##注释掉#Subsys...

2018-03-19 17:18:09 1163

原创 zookeeper hadoop-ha znode错误导致ZKFailoverController无法启动

Ambari启动ZKFailoverController失败了，输入tail -f -n 100 hadoop-hdfs-zkfc-master.log 日志中显示：org.apache.hadoop.ha.ZKFailoverController: Unable to start failover controller. Parent znode does not exist.Run with...

2018-03-14 13:38:46 5830

原创 zookeeper.MetaTableLocator: Failed verification of hbase:meta

hbase正常启动，ambari上显示一切正常，但是查看hbase的日志文件hbase-hbase-regionserver-master.log可以看到如下错误：2018-03-13 14:15:44,608 INFO [master:16000.activeMasterManager] zookeeper.MetaTableLocator: Failed verification of hb...

2018-03-13 16:57:19 2558 1

原创 Consistency Check Failed / Error occured during stack advisor command invocation

Ambari出现Consistency Check Failed错误，并且配置NameNode HA时出现500 status code错误。这里是因为权限问题，修改一下权限就行了：chown -R ambari /var/run/ambari-server这里的ambari换成配置ambari-server时的用户名...

2018-03-13 11:22:16 2332 1

原创 Roll Back NameNode HA

用Ambair部署HDP后，开启了NameNode HA模式，后来由于种种原因导致系统出了问题，需要停掉HA模式，并还原到最开始的NameNode和Secondary NameNode的模式。https://docs.hortonworks.com/HDPDocuments/Ambari-2.4.2.0/bk_ambari-user-guide/content/how_to_roll_back_n...

2018-03-07 11:23:21 379

原创 Ambari出现[SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed错误

通过Ambari部署系统时遇到过这个问题，以及某一次重启服务器之后，节点显示heartbeat lost，也是因为这个问题。在/var/log/ambari-agent中可以看到日志，日志里显示：ERROR 2018-03-06 11:02:25,223 NetUtil.py:88 - [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify fail...

2018-03-07 10:01:06 4661 1

原创 Ambari HDP 常用命令

启动ambari server: ambari-server start重启ambari server: ambari-server restart关闭ambari server: ambari-server stop启动ambari agent: ambari-agent start重启ambari agent: ambari-agent restart关闭ambari agent: ambar...

2018-03-07 09:48:25 3352

转载 Ambari安装配置lzo

使用Ambari部署好hdp后，先安装lzo所需的相关文件：yum -y install lzo lzo-devel hadoop-lzo hadoop-lzo-native 然后通过web界面进行配置，进入到hdfs的参数配置界面，如下图所示：在Advanced core-site的项目io.compression.codecs里添加：com.hadoop.compression.lzo.Lz...

2018-02-26 16:56:07 1138 2

原创三台CentOS 7.2服务器上使用Ambari部署HDP

三台服务器，配置都一样，一台作为master，两台作为slaver，如下所示：oscpu(核)memory(G)系统盘(G)数据盘CentOS 7.22*8core12860012*4 SATACentOS 7.22*8core12860012*4 SATACentOS 7.22*8core12860012*4 SATA一、修改Hosts1、vi /etc/hosts#三台服务器相同加入三行：10...

2018-02-26 15:43:21 410

wszhtc的博客