Unable to load sink type: org.apache.spark.streaming.flume.sink.SparkSink, class: org.apache.spark.streaming.flume.sink.SparkSink
在使用pull得方式,启动Flume时,出现如下报错
这是因为,我们使用了pull方法中,官方网站中指定得sink.type,但官网指定的type类没有在$FLUME_HOME/lib下,所以系统找不到这个类。
解决方法:
只需要在pom文件中,下载相应的包,并找到SparkStreaming-flume-sink的jar包,并上传到$FLUME_HOME/lib下,即可