1 如果读取存在数据库fromoffset数据为空,那么offset会优先从kafka中获取上次的offset,
2 如果用DB方式存读offset,此时fromoffset为空,也没有手动保存offset到kafka当中,那么每次起程序都会读取之前保存在kafka中的offset,知道手动将offset保存到kafka当中下次读取才回改变
sparksteaming与kafka手动保存offset
最新推荐文章于 2022-11-28 20:10:41 发布
1 如果读取存在数据库fromoffset数据为空,那么offset会优先从kafka中获取上次的offset,
2 如果用DB方式存读offset,此时fromoffset为空,也没有手动保存offset到kafka当中,那么每次起程序都会读取之前保存在kafka中的offset,知道手动将offset保存到kafka当中下次读取才回改变