NIFI 集群状态管理State Management

最新推荐文章于 2023-09-21 15:36:00 发布

小南瓜瓜

最新推荐文章于 2023-09-21 15:36:00 发布

阅读量1.1k

点赞数

分类专栏： nifi 文章标签： nifi 集群状态管理

本文链接：https://blog.csdn.net/memoordit/article/details/78804853

版权

本文档详细介绍了NiFi的状态管理机制，包括Processors、Reporting Tasks和Controller Services如何持久化状态。着重讨论了Configuring State Providers，如本地节点和集群范围的状态存储，并解释了WriteAheadLocalStateProvider和ZooKeeperStateProvider的配置与使用。文中还提及了ZooKeeper的访问控制选项以及在独立模式和集群模式下如何配置状态提供程序。

摘要由CSDN通过智能技术生成

状态管理

NiFi为Processors, Reporting Tasks, Controller Services以及框架本身提供了一种持久化状态的机制。这允许一个处理器，例如，在NiFi重新启动之后，从它离开的地方恢复。此外，它允许处理器存储一些信息，以便处理器可以从集群中的所有不同节点访问该信息。这允许一个节点获取另一个节点离开的位置，或者在集群中的所有节点之间进行协调。

Configuring State Providers

当组件决定存储或恢复状态时，它通过提供一个“Scope”来实现-本地节点（Node-local）或集群范围（ Cluster-wide）。然后根据此Scope以及配置的State Providers来确定用于存储和检索此状态的机制。 nifi.properties文件包含三个与这些State Providers相关的属性配置。

属性	描述
nifi.state.management.configuration.file	指定用于配置local 或Cluster-wide的State Providers的外部XML文件。这个XML文件可能包含多个提供者的配置
nifi.state.management.provider.local	指定在xml文件中配置的local State Provider 的名称
nifi.state.management.provider.cluster	指定在xml文件中配置的cluster-wide State Provider 的名称