storm在zookeeper中的目录存储信息

最新推荐文章于 2022-09-23 17:43:38 发布

__Simon'

最新推荐文章于 2022-09-23 17:43:38 发布

阅读量1.2k

点赞数

分类专栏： Storm zookeeper

本文链接：https://blog.csdn.net/Simon_09010817/article/details/85001949

版权

本文介绍了storm在zookeeper中的目录结构，包括workbeats、storms、assignments和supervisor节点，详细阐述了各节点存储的storm运行状态、任务分配、错误信息等关键信息，展示了storm与zk的紧密协作。

摘要由CSDN通过智能技术生成

storm在zk中的目录图：

/-{storm-zk-root}          -- storm在zookeeper上的根目录(默认为/storm)
 |
 |-/assignments            -- topology的任务分配信息
 |   |
 |   |-/{topology-id}      -- 这个下面保存的是每个topology的assignments信息包括： 对应的
 |                            nimbus上的代码目录,所有task的启动时间,每个task与机器、端口的映射
 |                            操作为(assignments)来获取所有的assignments的值；
 |                            以及(assignment-info storm-id)来得到给定的storm-id对应的AssignmentInfo信息
 |                            在AssignmentInfo中存储的内容有:
 |                            :executor->node+port :executor->start-time-secs :node->host
 |                            具体定义在common.clj中的
 |                            (defrecord Assignment [master-code-dir node->host executor->node+port executor->start-time-secs])
 |
 |-/storms                 -- 这个目录保存所有正在运行的topology的id
 |   |                        
 |   |
 |   |-/{topology-id}      -- 这个文件保存这个topology的一些信息，包