retharu_i7的博客

原创 数据采集实验：Kafka+hdfs+flume

在windows环境下，做flume实验过程中，第一个用Flume实时捕捉MySQL数据库中的记录更新实验中基本比较简单，但是还是要注意conf文件，在配置中需要注意apache-flume-1.9.0的位置。有大佬说是因为jar包冲突的原因，去查guava包，在flume的lib的版本是11.0.9，在hadoop的lib下是28.0。是因为缺少flume-ng-sql-source jar包导致的，找到相应的包，解决办法是把高版本的guava复制到低版本的lib中，同时删掉低版本guava。