- 博客(4)
- 收藏
- 关注
RSS订阅原创 Error while getting events from Kafka
报错详情 Error while getting events from Kafka at org.apache.flume.channel.kafka.KafkaChannel$KafkaTransaction.doTake(KafkaChannel.java:523) at org.apache.flume.channel.BasicTransactionSemantics.take(BasicTransactionSemantics.java:113)
2020-12-29 20:42:12
249
原创 大数据面试题整理（一）----＞＞Flume
1、flume了解吗。简单介绍一下Flume是一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Agent是flume流的基础部分，Agent是一个JVM进程，Agent的三大组成部分：source、channel、sink。传输数据的基本单元是Event。优势：Flume可以将应用产生的数据存储到任何集中存储器中，比如HDFS,HBase。当收集数据的速度超过将写入数据的时候，也就是当收集信息遇到峰值时，这时候收集的信息非常大，甚至超过了系统的写入数据能力，这时候，Flume会
2020-12-28 21:31:26
281
原创 ERROR org.apache.kafka.common.errors.InvalidReplicationFactorException: replication factor: 1 large
报错命令bin/kafka-topics.sh --create --topic vehicle-topic-0224 --partitions 3 --replication-factor 1 --zookeeper node-1:2181/kafka出现报错Error while executing topic command : replication factor: 1 larger than available brokers: 0[2020-12-22 21:09:26,167]
2020-12-22 21:30:01
4246
原创 Linux系统中莫名其妙的进程，kill不掉 ----解决办法
当我们打开系统的时候，查看进程，发现一些莫名其妙的进程，而且还kill不掉经过查询发现这些进程在一个文件夹中保留，cd /tmpcd hsperfdata_impala/可以观察到这与我们存在的进程完全相同只要我们将这个文件夹中的文件删掉，问题就迎刃而解。并且不会对集群产生任何影响rm -rf 1808可以查看下进程确实已经没了...
2020-12-16 22:04:32
810
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人