自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(4)
  • 收藏
  • 关注

原创 Error while getting events from Kafka

报错详情 Error while getting events from Kafka at org.apache.flume.channel.kafka.KafkaChannel$KafkaTransaction.doTake(KafkaChannel.java:523) at org.apache.flume.channel.BasicTransactionSemantics.take(BasicTransactionSemantics.java:113)

2020-12-29 20:42:12 249

原创 大数据面试题整理(一)---->>Flume

1、flume了解吗。简单介绍一下Flume是一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Agent是flume流的基础部分,Agent是一个JVM进程,Agent的三大组成部分:source、channel、sink。传输数据的基本单元是Event。优势:Flume可以将应用产生的数据存储到任何集中存储器中,比如HDFS,HBase。当收集数据的速度超过将写入数据的时候,也就是当收集信息遇到峰值时,这时候收集的信息非常大,甚至超过了系统的写入数据能力,这时候,Flume会

2020-12-28 21:31:26 280

原创 ERROR org.apache.kafka.common.errors.InvalidReplicationFactorException: replication factor: 1 large

报错命令bin/kafka-topics.sh --create --topic vehicle-topic-0224 --partitions 3 --replication-factor 1 --zookeeper node-1:2181/kafka出现报错Error while executing topic command : replication factor: 1 larger than available brokers: 0[2020-12-22 21:09:26,167]

2020-12-22 21:30:01 4240

原创 Linux系统中莫名其妙的进程,kill不掉 ----解决办法

当我们打开系统的时候,查看进程,发现一些莫名其妙的进程,而且还kill不掉经过查询发现这些进程在一个文件夹中保留,cd /tmpcd hsperfdata_impala/可以观察到这与我们存在的进程完全相同只要我们将这个文件夹中的文件删掉,问题就迎刃而解。并且不会对集群产生任何影响rm -rf 1808可以查看下进程确实已经没了...

2020-12-16 22:04:32 810

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除