在系统平稳运行一年的基础上,为提供更好的服务,现针对java,kafka,flume,zk,统一进行版本升级,请各位小伙伴跟着走起来,不要掉队啊!
名称 | 老版本号 | 新版本号 |
---|---|---|
jdk | 1.7.0_25 | 1.8.0 |
kafka | 2.10-0.8.0.1 | 2.10-0.10.2.1 |
flume | 1.6.0 | 1.7.0 |
zookeeper | 3.4.6 | 3.4.8 |
jdk,zookeeper,flume:
这两个中间件平滑升级,没有特殊的地方,参考其他博客就好
kafka:
这个的变化还是很大的,咱们详细说来
1,zk的作用
offsets,这个值,标记kafka消费到哪了,以前由zk维护,但是,遇到并发比较大的情况,zk的数据出现错误的几率变大,目前版本交由kafka