weixin_39574120的博客

原创 Flume 断点续传解决方案

Flume 断点续传解决方案采集源，即source——监控文件内容更新 : exec ‘tail -F file’时会遇到一个问题，当flume宕机时，监测的文件还在不断地更新，此时如果Flume重启就会出现数据丢失的情况。以下是我在遇到这个问题时的解决方案，从最初的V1 -> V2 -> V3在不改变源码的情况下一步一步改进。Version1a1.sources = r1...