记录pulsar消费出现的一次问题 No such ledger exists on Metadata Server
报错信息如下 : No such ledger exists on Metadata Server
版本 pulsar2.8.1 zk 3.5.5 bk 4.8.2
问题描述: 启动pulsar前,由于之前的操作失误,使用root进行集群的 停启,导致文件可能有部分造成缺失以及权限问题,删除所提示的问题文件后,启动pulsar成功,生产数据也没有报错,但是消费数据提示如下错误。在github上找类似的lssure都没有很好的解决方法,怀疑是存储文件的元数据损坏导致,由于是之前同事进行了一系列操作,实在不太能定位到文件在什么地方出现问题,将元数据删除重新进行初始化才解决,具体操作方法是:关闭集群(pulsar、bk、zk按顺序关闭,将zk的数据文件清除,重新初始化pulsar集群,初始化bk,启动pulsar)。
特别注意:该集群属于测试阶段集群,无重要数据,且zk中无其他的组件元数据,可随意初始化,有重要数据的情况下,建议寻找最优解决办法,或者备份好数据。仅供记录使用,切勿随意在生产环境中模仿。
相关链接可参考:
https://github.com/streamnative/pulsar/issues?q=No+such+ledger+exists+on+Metadata+Server
持续更新
对于上述问题的解决问题思考,在正式环境中,我们肯定不能随意初始化,但是对于某一topic而言,报错消费失败,且原因大概率是元数据存储问题,我们是不是可以先将topic卸载删除,重新创建来解决问题。由于没有进行具体测试,不好断言,现阶段也没有办法复现,后续如果遇到了再进行测试。
pulsar常用命令链接: https://my.oschina.net/u/4312837/blog/4947952
博主是新人小白,对于上述言论,如果觉得哪里有问题,欢迎指出并讨论,感谢!
刚开始学习pulsar,希望可以和各位大佬一起交流。