保证Flume数据不丢失

1、断点续传

注意 ： flume1.7之后有，1.7之前就需要自己写jar包上传上去使用

#source的配置
# source类型
a1.sources.r1.type = TAILDIR
# 如果flume故障，这个文件用来记录断点位置   这个文件是  自己生成的，不用提前建好，要不会报错
a1.sources.r1.positionFile = /home/hadoop/data/bd/taildir_position.json
# 监控的目录
a1.sources.r1.filegroups = f1
a1.sources.r1.filegroups.f1=/home/hadoop/data/bd/.*log
a1.sources.r1.fileHeader = true

2、flume的channel是file保存到文件中