ETL工具
文章平均质量分 74
etl
坤岭
这个作者很懒,什么都没留下…
展开
-
ElasticSearch部署
问题原因:因为Centos6不支持SecComp,而ES默认bootstrap.system_call_filter为true进行检测,所以导致检测失败,失败后直接导致ES不能启动。详见 :https://github.com/elastic/elasticsearch/issues/22899。修改kibana.yml配置,添加elasticsearch.ssl.verify: false。修改 /etc/security/limits.d/90-nproc.conf。创建elastic用户。原创 2023-07-16 22:03:41 · 51 阅读 · 0 评论 -
Kafka基础
Apache Kafka是一种分布式的、基于发布/订阅的消息系统,由Scala语言编写而成。最初由LinkedIn开发,并于2011年初开源。是目前主流的分布式消息引擎及流处理平台,常用作消息总线,实时数据管道,存储系统Kafka 主要起到削峰填谷(缓冲)、系统解构以及冗余的作用。原创 2023-06-29 23:22:08 · 67 阅读 · 0 评论 -
Flume
flume是分布式的,可靠的,用于从不同的来源有效收集 聚集 和 移动 大量的日志数据用以集中式的数据存储的系统。是apache的一个顶级项目。原创 2023-08-28 23:43:15 · 51 阅读 · 0 评论