Elasticsearch 聚合的嵌套桶如何排序
欢迎访问我的 GitHub
这里分类和汇总了欣宸的全部原创(含配套源码):https://github.com/zq2599/blog_demos
关于嵌套桶
在 elasticsearch 的聚合查询中,经常对聚合的数据再次做聚合处理,例如统计每个汽车品牌下的每种颜色汽车的销售额,这时候 DSL 中就有了多层 aggs 对象的嵌套,这就是嵌套桶(此名称来自《Elasticsearch 权威指南》),如下图所示:
今天要讨论的就是在执行类似上述嵌套桶聚合时,返回的数据如何排序。首先咱们先把环境和数据准备好。
环境信息
以下是本次实例的环境信息,请确保您的 Elasticsearch 可以正常运行:
操作系统:Ubuntu 18.04.2 LTS
JDK:1.8.0_191
Elasticsearch:6.7.1
Kibana:6.7.1
实例数据
查询用到的数据是个名为 cars 的索引,里面保存了多条汽车销售记录,字段有品牌(make)、颜色(color)、价格(price)、售卖时间(sold)等,在 elasticsearch-head 查看数据如下图:
如果您想将上图中的数据导入到自己的 es 环境,请参考《Elasticsearch聚合学习之一:基本操作》,文中有详细的导入步骤;
对内层桶排序
针对前面提到的需求:统计每个汽车品牌下的每种颜色汽车的销售额,通常做法是:先按照品牌聚合,生成的每个桶(bucket)内有这个品牌的所有销售记录,然后将每个桶内的文档再按照颜色聚合,这样每个桶内就有多个子桶,每个子桶内就是每个品牌下每种颜色的销售记录。
既然每个桶内有多个子桶,那么就可以对这些子桶桶进行排序,如下图,可以对红框内的数据进行排序:
请求 DSL 如下:
响应数据如下,可见 buckets 内的每个对象自身也有 buckets 数组,里面的每个元素就是子桶,这些子桶是已经排序过了的:
此时,外层桶并没有排序。
整体排序
前面的示例只是对内层桶做了排序,外层桶是没有排序的,接下来看看如何做整体排序。
要想整体排序,一定要区分不同的内层桶的特点,才能做排序,总的来说分为以下几种情况:
内层桶是外层桶的数据聚合生成的,在前面的示例中,外层桶是都是某个品牌的汽车,对桶内数据按照颜色聚合,得到了内层桶,如下图:
对于这样的数据,无法做整体排序,因为内层桶的结果属于多值,而整体排序只能基于单值进行,以下是《Elasticsearch 权威指南》的说明,见红框内描述:
内层桶是外层桶的数据过滤生成的,例如统计每个汽车品牌下红色汽车的销售额,先按照品牌聚合,再对外层桶按照颜色做过滤,这样的嵌套是可以用内层桶字段的值来排序的,DSL 如下:
返回数据如下所示,是按照 sales 字段做的排序:
对于嵌套桶,是否能进行整体排序的关键就在于整个嵌套路径中,是否有多值的桶出现,如果没有就可以用嵌套内部的字段进行排序,除了上面的 filter,还有 global 和 reverse_nested 这两种桶类型生成的也是单值桶,因此也可以用其内部的字段进行排序;
至此,嵌套桶的聚合结果排序已经实践完毕了,希望您在面对类似排序问题时,此文能给您一些参考。
欢迎关注 InfoQ:程序员欣宸
版权声明: 本文为 InfoQ 作者【程序员欣宸】的原创文章。
原文链接:【http://xie.infoq.cn/article/47a1abbf0a817eed1699dc142】。文章转载请联系作者。
评论