es 聚合分页（group by后分页）

es 实现sql的 group by后如何分页？

先放json解释，再放纯净版方便copy

1. {

2. "query": {

3. ...... //搜索条件

4. },

5. "aggs": {

6. "count": { // COUNT(*)，统计GROUP BY后的总数

7. "cardinality": {

8. "field": "goods_id" // 因为我这里GROUP BY的字段是goods_id，所以就用goods_id来计数了

9. }

10. },

11. "goods_id": {

12. "terms": {

13. "field": "goods_id", // 选择GROUP BY的字段

14. "size": 20 // 取出20条GROUP BY的数据。数量应设置为sql中offset+limit的数量。注：其实es聚合操作不是很支持分页，于是只能先将数据取出，再对其做分页操作，可想而知页数越往后效率越低

15. },

16. "aggs": {

17. "group": {

18. "top_hits": {

19. "sort": [

20. {

21. "stock_num": {

22. "order": "desc" // GROUP BY的数据如何排序，这里是根据stock_num 降序排列

23. }

24. }

25. ],

26. "_source": { // 对应SQL的SELECT

27. "includes": [

28. "goods_no" // SELECT的列

29. ]

30. },

31. "size": 1 // es聚合时需要指定返回几条数据（即返回几条同一个goods_id的数据）我们做GROUP BY操作就只要写1就完事了

32. }

33. },

34. "r_bucket_sort": { // 分页操作

35. "bucket_sort": {

36. "sort": [],

37. "from": 0, // 对上面取出的20条数据分页，等价于SQL的OFFSET

38. "size": 10 // SQL的LIMIT

39. }

40. }

41. }

42. }

43. },

44. "size": 0, // 因为是做聚合操作，所以直接无视query筛选出的数据

45. "from": 0

46. }

纯净版

1. {

2. "query": {

4. },

5. "aggs": {

6. "count": {

7. "cardinality": {

8. "field": "group_by_field"

9. }

10. },

11. "goods_id": {

12. "terms": {

13. "field": "group_by_field",

14. "size": offset + limit

15. },

16. "aggs": {

17. "group": {

18. "top_hits": {

19. "sort": [

20. {

21. "sort_by_field": {

22. "order": "desc"

23. }

24. }

25. ],

26. "_source": {

27. "includes": [

28. "select_field1",

29. "select_field2"

30. ]

31. },

32. "size": 1

33. }

34. },

35. "r_bucket_sort": {

36. "bucket_sort": {

37. "sort": [],

38. "from": offset,

39. "size": limit

40. }

41. }

42. }

43. }

44. },

45. "size": 0,

46. "from": 0

47. }

拿到response后怎么取数据就不说了。用es作group by分页属实蛋疼，个人觉得不是很好，有条件还是多做个索引

对于一般的sql可以直接用
POST http://localhost:9200/_xpack/sql/translate
也是挺方便的，不过基本只能转换简单sql，group by不行