![](https://img-blog.csdnimg.cn/20201014180756919.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Ambari
rookie_bigdata
菜鸟一枚
展开
-
Ambari 集群重启后,HDFS 报告警 NameNode Last Checkpoint
现象:Ambari 集群重启后,HDFS 报告警 NameNode Last Checkpoint解决:在其中一台服务器依次执行下边三条命令(HDFS用户)hdfs dfsadmin -safemode enterhdfs dfsadmin -saveNamespacehdfs dfsadmin -safemode leave原创 2021-03-22 09:59:40 · 584 阅读 · 0 评论 -
Ambari Yarn ResourceManager 无法停止及启动
现象:通过 Ambari 安装了 Yarn HA,一段时间后,Ambari报连接不上其中一个服务器的 ResourceManager 警告。去该服务器上看,没有相关的 ResourceManager 进程。在Ambari界面重启,在停止阶段失败。直接启动也失败。在该服务器通过命令yarn-daemon.sh start resourcemanager 启动后,警告消失。但通过这种方法启动的 ResourceManager 跟在Ambari界面启动的不一样,导致Ambari接管有些问题:Ya.原创 2021-03-19 15:45:39 · 1175 阅读 · 0 评论 -
Ambari Spark 集成 Hive 失败。spark sql创建的表hive看不到,hive创建的表 spark看不到
现象:Ambari 安装了 Spark 和 hive ,但集成未成功。spark sql创建的表hive看不到,hive创建的表 spark看不到解决:登录 Ambari 界面,到 Spark 组件修改配置。 1)Advanced spark2-defaults 的 spark.sql.warehouse.dir 值/apps/spark/warehouse 改为 /warehouse/tablespace/managed/hive (其实就是 hive 的 Hive Metastore W原创 2020-07-02 10:13:48 · 931 阅读 · 0 评论 -
Ambari 两个 NameNode 都为 standby
问题:NameNode move 失败后,出现两个 standby Namenode,无 active namenode。日志报错Cannot find any valid remote NN to service request!解决:1,通过 ambari 界面关闭所有服务2,登录两个 standby namenode 所在的节点并执行hdfs zkfc -formatZK (选 Y)3,通过 ambari 界面启动 zkfc 及 namenode ,这个时候就有一个 ac.原创 2020-06-18 14:48:19 · 948 阅读 · 0 评论 -
记一次 Ambari Namenode 移动失败的恢复过程
问题:Ambari 需要将 node1 的 active namenode 移到 node3,node2 的 standby namenode 移动到 node4移动 standby name 时一切正常。移动 active namenode 时失败。此时存在 3 个 namenode , hdfs cluster 有两个(node1,node4),node3有一个。回退:将 node3 上的 namenode 和 zkfc 删除。此时在 ambari 界面无法删除,只能通过 a..原创 2020-06-17 10:27:28 · 472 阅读 · 0 评论 -
Ambari 启用备用的 Ambari Server
问题:Ambari Server 存在单点问题解决:在备用节点部署 Ambari Server ,当主用 Ambari Server 发生故障时,启用备用 Ambari Server步骤:完成备用 Ambari Server 的安装,跟主用 Ambari Server 连同一 mysql 数据库,备用节点环境变量设置,免密到所有 Agent 节点等配置。 备用节点执行 ambari-server start。 所有 Ambari Agent 修改指向的 Ambari Server 地原创 2020-06-16 10:52:46 · 265 阅读 · 0 评论 -
Ambari 切换 mysql 数据库
现状:Ambari 搭建好了,但存元数据的 mysql 存在单点问题。解决:Ambari 改为指向 mysql 集群。步骤:1,搭建 mysql 集群。https://blog.csdn.net/Lbg_007/article/details/1067093532,迁移 mysql 数据库。在 web 界面停止 ambari 管理的所有组件服务 登录 ambari server 所在服务器。停止 ambari server ambari-server stop 导出原 m.原创 2020-06-15 10:58:16 · 806 阅读 · 0 评论 -
大数据 Ambari Yarn 告警: The HBase application reported a STARTED state in xxxxs 解决
现象:Ats-hbase 作为 yarn 的一个服务已正常起来。但一直存在告警The HBase application reported a 'STARTED' state in 1.773s原因:未知解决:1,su - yarn-ats2,yarn app -destroy ats-hbase3,hadoop fs -rm -R /user/yarn-ats/3.1.4.0-315/* (备注:把 3.1.4.0-315 换成自己环境的版本,通过 hadoop fs...原创 2020-06-01 16:03:51 · 3814 阅读 · 4 评论