![](https://img-blog.csdnimg.cn/1ca6c77eac414d92b82c4e67fdaa3ce7.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
flume
文章平均质量分 91
flume
five小点心
阳光开朗孔乙己
展开
-
日志收集系统:将应用产生的数据通过flume收集后发送到Kafka,整理后保存至hbase
日志收集系统:将应用产生的数据通过flume收集后发送到Kafka,整理后保存至hbase原创 2023-05-04 18:11:00 · 924 阅读 · 0 评论 -
大数据技术之flume——日志收集系统
大数据需要解决的三个问题:采集、存储、计算。Apache flume是一个分布式、可靠的、高可用的海量日志数据采集、聚合和传输系统,将海量的日志数据从不同的数据源移动到一个中央的存储系统中。用一句话总结:Flume不生产数据,它只是数据的搬运工。flume最主要的作用就是,实时读取服务器本地磁盘的数据,将数据写入到HDFS。原创 2023-03-16 10:55:51 · 2061 阅读 · 2 评论