solr深分页，游标操作分页，解决性能问题

最新推荐文章于 2024-08-05 14:02:09 发布

wxshi_java

最新推荐文章于 2024-08-05 14:02:09 发布

阅读量4.8k

点赞数 1

分类专栏： solr 文章标签： solr

本文链接：https://blog.csdn.net/u013035314/article/details/46007767

版权

本文介绍了如何使用Solr的游标分页（Cursor Mark）来解决当页码过大时导致的性能问题。虽然这种方法可能导致内存泄露，但通过谨慎处理，可以有效提高分页查询效率。示例代码展示了如何设置游标进行分页查询，并打印查询结果大小，最后计算了整个查询过程的时间消耗。

摘要由CSDN通过智能技术生成

游标分页操作，解决页码过大时的性能问题。当然这容易内存泄露，需要谨慎处理；代码如下

 @Test
    public void pageByCursor() {
try {
   solrServer.connect();
   String query = "tablename:log_baseresult_netbehavior";
   SolrQuery q = new SolrQuery(query);
   q.setRows(10000000).setSort(SortClause.asc("rowkey"));


   String cursorMark = CursorMarkParams.CURSOR_MARK_START;


   boolean done = false;


   long time1 = System.currentTimeMillis();
   while (!done) {
q.set(CursorMarkParams.CURSOR_MARK_PARAM, cursorMark);
QueryResponse qresponse = solrServer.query(q, METHOD.POST);

String nextCursorMark = qresponse.getNextCursorMark();

SolrDocumentList sList = qresponse.getResults();
System.out.println("---------"+sList.size());
/*for (SolrDocument doc : sList) {
   Collection<String> fieldNames = doc.getFieldNames();
   if (fieldNames.contains("rowkey")) {
String rowKey = (String) doc.getFieldVal