solr深分页，游标操作分页，解决性能问题

最新推荐文章于 2024-04-30 14:11:56 发布

wxshi_java

最新推荐文章于 2024-04-30 14:11:56 发布

阅读量4.7k

点赞数 1

分类专栏： solr 文章标签： solr

本文链接：https://blog.csdn.net/u013035314/article/details/46007767

版权

了解solr的setStart分页问题不能解决后续分页的性能问题,提供了游标操作，不仅能解决深度分页问题，还能提供一次性全部获取索引（虽然不推荐这么做）

摘要由CSDN通过智能技术生成

游标分页操作，解决页码过大时的性能问题。当然这容易内存泄露，需要谨慎处理；代码如下

 @Test
    public void pageByCursor() {
try {
   solrServer.connect();
   String query = "tablename:log_baseresult_netbehavior";
   SolrQuery q = new SolrQuery(query);
   q.setRows(10000000).setSort(SortClause.asc("rowkey"));


   String cursorMark = CursorMarkParams.CURSOR_MARK_START;


   boolean done = false;


   long time1 = System.currentTimeMillis();
   while (!done) {
q.set(CursorMarkParams.CURSOR_MARK_PARAM, cursorMark);
QueryResponse qresponse = solrServer.query(q, METHOD.POST);

String nextCursorMark = qresponse.getNextCursorMark();

SolrDocumentList sList = qresponse.getResults();
System.out.println("---------"+sList.size());
/*for (SolrDocument doc : sList) {
   Collection<String> fieldNames = doc.getFieldNames();
   if (fieldNames.contains("rowkey")) {
String rowKey = (String) doc.getFieldVal