SolrCloud遇错小记(20170406)

SolrCloud遇错小记(20170406)

今天在5台服务器的SolrCloud上新建collection。因为schema中写错一个fieldType,导致新建不成功,修改过之后可以建立collection。但是在5个节点的Admin UI上,还是显示之前的报错。后来发现分别重启各个solr节点可以解决这个问题,所以就挨个重启solr节点。

重启的时候,不小心有3台机器一起重启,导致有2个分片无法自动选举leader。此处用/admin/collections?action=FORCELEADER 命令可以强制选举。

全部重启后,发现以前的一个外挂的ansj分词在搜索时报错:java.lang.NoClassDefFoundError: Could not initialize class org.ansj.library.NgramLibrary。看了很久log,发现前面有个OutOfMemory的错误。调整一下内存就好了。

开始使用SolrJ建立新collection的索引。这里遇到两个问题有待解决:
1. org.apache.solr.common.SolrException: Error opening new searcher. exceeded limit of maxWarmingSearchers=2, try again later.

这个问题应该是commit过于频繁造成的。由于我是用的多线程,每个线程中都有个solrClient, 每个线程都commit,造成这个错误。 我把程序改为一个solrClient,每个线程中只add文档,全部线程结束后在commit一次,从而解决问题。

  1. 2017-04-06 18:29:00 Error: Solr Committing Error
    org.apache.solr.common.SolrException: java.util.concurrent.TimeoutException: Could not connect to ZooKeeper 192.168.216.102:2181,192.168.216.103:2181,192.168.216.106:2181,192.168.216.109:2181,192.168.216.111:2181 within 30000 ms
    at org.imsl.observer.OperatingUploader.indexDocs(OperatingUploader.java:118)
    at org.imsl.observer.OperatingUploader.run(OperatingUploader.java:88)
    Caused by: java.util.concurrent.TimeoutException: Could not connect to ZooKeeper 192.168.216.102:2181,192.168.216.103:2181,192.168.216.106:2181,192.168.216.109:2181,192.168.216.111:2181 within 30000 ms
    … 2 more
    我已经把setZkConnectTimeout设到了30000 ms,时间应该足够了。后来发现每个solrClient都需要close(),之后就不报这个错误了。
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Protobuf是一种高效的序列化协议,可以用于数据交换和数据存储。它的主要优势是大小小,速度快,可扩展性强。下面是使用Protobuf的一些小记: 1. 定义消息格式 首先,需要定义消息格式,以便Protobuf可以将数据序列化和反序列化。消息格式定义在.proto文件中,使用protobuf语言编写。例如,下面是一个简单的消息格式定义: ``` syntax = "proto3"; message Person { string name = 1; int32 age = 2; } ``` 这个消息格式定义了一个名为Person的消息,包含两个字段:name和age。 2. 生成代码 一旦消息格式定义好,就可以使用Protobuf编译器生成代码。编译器将根据消息格式定义生成相应的代码,包括消息类、序列化和反序列化方法等。可以使用以下命令生成代码: ``` protoc --java_out=. message.proto ``` 这将生成一个名为message.pb.java的Java类,该类包含Person消息的定义以及相关方法。 3. 序列化和反序列化 一旦生成了代码,就可以使用Protobuf序列化和反序列化数据。例如,下面是一个示例代码,将一个Person对象序列化为字节数组,并将其反序列化为另一个Person对象: ``` Person person = Person.newBuilder() .setName("Alice") .setAge(25) .build(); byte[] bytes = person.toByteArray(); Person deserializedPerson = Person.parseFrom(bytes); ``` 这个示例代码创建了一个Person对象,将其序列化为字节数组,然后将其反序列化为另一个Person对象。在这个过程中,Protobuf使用生成的代码执行序列化和反序列化操作。 以上是使用Protobuf的一些基本步骤和注意事项,希望对你有所帮助!

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值