Druid 加载 Kafka 流数据 Supervisor 配置

最新推荐文章于 2022-04-05 11:50:42 发布

HoneyMoose

最新推荐文章于 2022-04-05 11:50:42 发布

阅读量353

点赞数

分类专栏： iSharkFly

本文链接：https://blog.csdn.net/huyuchengus/article/details/119552742

版权

iSharkFly 专栏收录该内容

497 篇文章 4 订阅

订阅专栏

本文详细介绍了Druid中Kafka Supervisor的配置信息，包括type、dataSchema、ioConfig和tuningConfig字段。dataSchema用于定义数据导入时的数据结构，ioConfig设置了Kafka连接参数和I/O设置，而tuningConfig则涉及性能调优。理解这些配置对于有效地管理和优化Druid Kafka集成至关重要。

摘要由CSDN通过智能技术生成

在 Supervisor 中可用的 Kafka 配置表如下：

字段（Field）	描述（Description）	是否必须（Required）
`type`	supervisor 的类型，总是 `kafka` 字符串。	Y
`dataSchema`	Kafka 索引服务在对数据进行导入的时候使用的数据 schema。请参考 `dataSchema` 页面来了解更多信息	Y
`ioConfig`	一个 KafkaSupervisorIOConfig 对象。在这个对象中我们对 supervisor 和索引任务（indexing task）使用 Kafka 的连接参数进行定义；对 I/O-related 进行相关设置。请参考本页面下半部分 KafkaSupervisorIOConfig 的内容。	Y
`tuningConfig`	一个 KafkaSupervisorTuningConfig 对象。在这个配置对象中，我们对 supervisor 和索引任务（indexing task）的性能进行设置。请参考本页面下半部分 KafkaSupervisorTuningConfig 的内容。	N