【Elasticsearch】nested聚合

ES实现nested类型聚合以及子聚合排序 ES针对nested类型聚合后排序 @doc [1111] 阅读详情

在 Elasticsearch 中,嵌套聚合(`nested`aggregation)的语法形式用于对嵌套字段(`nested`fields)进行聚合操作。嵌套字段是 Elasticsearch 中的一种特殊字段类型,用于存储数组中的对象,这些对象需要独立于其父文档进行索引和查询。

以下是嵌套聚合的基本语法形式及其组成部分的详细说明:

基本语法

```json

{

  "aggs": {

    "<nested_aggregation_name>": {

      "nested": {

        "path": "<nested_field_path>"

      },

      "aggs": {

        "<sub_aggregation_name>": {

          "<sub_aggregation_type>": {

            "<sub_aggregation_body>"

          }

        }

      }

    }

  }

}

```

组成部分

1. `<nested_aggregation_name>`:

• 这是嵌套聚合的名称,由用户自定义,用于在查询结果中标识该聚合。

2. `nested`:

• 这是嵌套聚合的类型标识符,表明这是一个嵌套聚合。

3. `path`:

• 指定嵌套字段的路径。嵌套字段路径是从根文档到嵌套字段的完整路径。例如,如果嵌套字段是`resellers`,则路径为`"resellers"`。

4. `aggs`:

• 在嵌套聚合中,可以定义一个或多个子聚合。子聚合可以是任何类型的聚合(如`min`、`max`、`avg`、`terms`等),用于对嵌套文档进行进一步的分析。

5. `<sub_aggregation_name>`:

• 子聚合的名称,由用户自定义,用于在查询结果中标识该子聚合。

6. `<sub_aggregation_type>`:

• 子聚合的类型,例如`min`、`max`、`avg`、`terms`等。

7. `<sub_aggregation_body>`:

• 子聚合的具体定义,包含子聚合的字段和其他参数。

示例

以下是一个具体的嵌套聚合示例,假设我们有一个产品索引`products`,其中包含一个嵌套字段`resellers`,每个`reseller`有`reseller`(经销商名称)和`price`(价格)两个字段。

创建索引和映射

```json

PUT /products

{

  "mappings": {

    "properties": {

      "resellers": {

        "type": "nested",

        "properties": {

          "reseller": {

            "type": "keyword"

          },

          "price": {

            "type": "double"

          }

        }

      }

    }

  }

}

```

添加文档

```json

PUT /products/_doc/0?refresh

{

  "name": "LED TV",

  "resellers": [

    {

      "reseller": "companyA",

      "price": 350

    },

    {

      "reseller": "companyB",

      "price": 500

    }

  ]

}

```

嵌套聚合查询

1. 查询所有经销商的最低价格:

```json

GET /products/_search?size=0

{

  "aggs": {

    "resellers_agg": {

      "nested": {

        "path": "resellers"

      },

      "aggs": {

        "min_price": {

          "min": {

            "field": "resellers.price"

          }

        }

      }

    }

  }

}

```

• `resellers_agg`:嵌套聚合的名称。

• `nested`:指定这是一个嵌套聚合。

• `path`:指定嵌套字段的路径为`resellers`。

• `min_price`:子聚合的名称。

• `min`:子聚合的类型,用于计算最小值。

• `field`:指定聚合操作的字段为`resellers.price`。

2. 查询特定经销商的最低价格:

```json

GET /products/_search?size=0

{

  "aggs": {

    "resellers_agg": {

      "nested": {

        "path": "resellers"

      },

      "aggs": {

        "filter_reseller": {

          "filter": {

            "bool": {

              "filter": [

                {

                  "term": {

                    "resellers.reseller": "companyB"

                  }

                }

              ]

            }

          },

          "aggs": {

            "min_price": {

              "min": {

                "field": "resellers.price"

              }

            }

          }

        }

      }

    }

  }

}

```

• `filter_reseller`:过滤子聚合的名称。

• `filter`:过滤条件,用于筛选出`resellers.reseller`为`companyB`的文档。

• `term`:过滤条件的类型,用于匹配特定的值。

响应示例

1. 查询所有经销商的最低价格:

```json

{

  "aggregations": {

    "resellers_agg": {

      "doc_count": 2,

      "min_price": {

        "value": 350.0

      }

    }

  }

}

```

2. 查询特定经销商的最低价格:

```json

{

  "aggregations": {

    "resellers_agg": {

      "doc_count": 2,

      "filter_reseller": {

        "doc_count": 1,

        "min_price": {

          "value": 500.0

        }

      }

    }

  }

}

```

总结

嵌套聚合的语法形式包括以下关键部分:

• `nested`:指定这是一个嵌套聚合。

• `path`:指定嵌套字段的路径。

• 子聚合:在嵌套聚合中嵌套其他聚合操作,用于对嵌套文档进行进一步分析。

通过嵌套聚合,可以对嵌套字段中的文档进行复杂的聚合操作,从而满足复杂的查询需求。 

 

ElasticSearch查询复杂结构,aggs进行复杂结构(nested)聚合 ES拥有强大的聚合统计能力故而应用广泛,简单结构的聚合统计功能不多,如何针对复杂结构进行聚合统计实际上是很多生产上需要面对的问题,而ES相关文档毕竟很少,大多数人又不太愿意去读官方文档。这里写一下如何对复杂结构进行聚合,产生我们想要的统计数据。 本次用到工具Kibana,操作均在Kibana上进行。例我们现在有一个doc,里面有很多很多的字段,其中一个字段为wordFrequency,其样式大致... 阅读详情

相关推荐

Elasticsearch Nested 类型全解析:原理、查询、聚合与最佳实践

本文全面解析 Elasticsearch Nested 类型,涵盖其原理、映射设计、索引与查询操作、嵌套聚合、更新策略及性能影响。通过完整示例(curl、Python、Java)、真实生产案例与操作流程,深入探讨 Nested 与 Object、Parent-Child 的对比及应用场景,并提供版本兼容性说明与最佳实践,帮助工程师高效、安全地在生产环境中使用 Nested 类型。

持续输出Java相关知识 1643

ElasticSearch_05_ES的嵌套聚合,下钻分析,聚合分析

ES的嵌套聚合,下钻分析,聚合分析

毛毛的专栏 1407

130.ElasticSearch(五):es聚合查询,nested数组

es聚合查询,nested数组

鹏哥哥Aaa 2092

Elasticsearch 的嵌套聚合和递归查询

是一个分布式搜索和分析引擎,可以用于处理大规模和复杂的数据集。在实际应用中,经常会遇到需要对多层嵌套文档进行聚合分析和递归查询的需求。本文将详细介绍如何在中实现这两种功能,并给出相关代码示例和参数介绍。本文介绍了中的嵌套聚合和递归查询的原理和应用场景,并给出了相关的代码示例和参数介绍。嵌套聚合可用于对多层嵌套文档进行聚合分析,而递归查询可用于在嵌套文档中进行深度搜索。这两种功能可以帮助我们更好地理解和分析嵌套数据。在实际应用中,我们可以根据具体需求选择适合的聚合函数和查询条件,并使用相应的API。

互联网知识分享 1195

半导体关键系统之RMS浅谈

这种系统还要求设备在设备上的配方发生变化时通知工厂主机,并需要与EAP(Equipment Automation Process)联结,旨在实时管控自动化系统所用配方与用户当初的设定是否匹配,从而使得自动化系统所用的配方更加趋于安全。例如,制药行业中的药品生产管理系统(GMP),它对药品的生产过程进行严格控制,包括原材料的采购、生产工艺流程、质量控制等方面。这些系统通常与企业的生产系统集成,能够对产品的配方进行精细化管理,包括配方的设计、试验、验证、生产等环节。

阿拉伯梳子的专栏 6168

iOS自动化之打包-xcodebuild命令行打包.app并安装到ios模拟器

xcode xcodebuild xcrun ios模拟器 iOS UI自动化测试 ios自动打包安装到ios模拟器

z12347891的博客 5083

ES nested嵌套、aggregation聚合查询基本用法

类似group by分组 Order by排序,ES 同样拥有聚合、排序功能。 Elastic Search中文版官方文档地址 Elastic Search英文版官方文档地址 1. bucket桶聚合 在firstAggregations中,使用terms分桶,即基于user_id进行分组统计(group by user_id) 在secondAggregations中,进行top_hits过滤结果,“size”选择多少条文档,“sort”进行条件排序(order by publish_time desc

weixin_43884057的博客 5108

DeepSeek Harness 本地部署与 AI 智能体开发全攻略

大语言模型(LLM)作为当前人工智能领域的核心技术,通过深度学习架构实现了对自然语言的深度理解与生成能力。其技术原理基于Transformer架构,通过海量文本数据训练,使模型能够捕捉语言的内在规律和语义关联。在工程实践中,LLM的价值在于能够作为智能体(Agent)的核心大脑,驱动各类应用实现自然语言交互、任务自动化和知识推理。常见的应用场景包括智能客服、代码生成、内容创作和数据分析等。本文聚焦于DeepSeek Harness这一开源AI应用开发框架,详细讲解如何从零开始部署这一智能体开发平台,并配置D

weixin_42527464的博客 383

Elasticsearch多层嵌套nested查询和多条件聚合aggregations

Elasticsearch 多层嵌套nested 多条件聚合aggregations

z125499702的专栏 3131

YOLOv5改进策略|实战应用案例|YOLOv5苹果成熟度检测 ,准确率提升4.6%

苹果作为世界四⼤⽔果之⼀,富含多种维⽣素和矿物质,⼀直深受世界各地消费者的喜爱。据联 合国粮⻝及农业组织统计,全球⽔果产量中,苹果位列第⼆位,仅次于葡萄(贾等⼈,2020 )。然⽽,⼤多数苹果果实都是⼿⼯采摘的,这样的⽣产⽅法效率很低。此外,随着⼈⼝⽼龄化 和农村劳动⼒⼤量涌⼊城市,⽔果种植⾏业的劳动⼒成本也相应上升。所有这些因素都显着影响 着⽔果产品的市场竞争⼒。因此,实时⾼效采收苹果等⽔果,降低采收成本势在必⾏。基于机器 视觉的⽔果采摘机器⼈可以利⽤其信息感知来识别和采摘⽔果。

斌擎科技 2212

基于simulink 的不间断电源ups的项目实例

UPS系统的核心组件包括整流器、逆变器、电池管理系统和控制系统。- **Three-Phase Controlled Rectifier**:设置触发角为0度,用于控制整流器的输出电压。- **Three-Phase Inverter**:设置逆变器的输出频率为60Hz,用于将直流电转换为交流电。- **Control System**:编写MATLAB函数,用于监测市电状态并控制各模块的工作模式。- **Step**:设置阶跃时间,例如0.05秒,阶跃前后的值分别为0和1,用于模拟市电中断。

xiaoheshang_123的博客 714

ElasticSearch(ES)使用Nested结构存储KV及聚合查询

自建博客地址:https://www.bytelife.net,欢迎访问! 本文为博客同步发表文章,为了更好的阅读体验,建议您移步至我的博客???? 本文作者: Jeffrey 本文链接: https://www.bytelife.net/articles/51440.html 版权声明: 本博客所有文章除特别声明外,均采用 BY-NC-SA 许可协议。转载请注明出处! 本文将讨论如何在ElasticSearch中使用nested结构进行数据的存储、查询和聚合,并结合K-V场景讨论ElasticSear

Jeffrey的博客 2074

【2025年华为秋招(AI)-11月19日-第一题(100分)- 选择题】(题目+思路+Java&C++&Python解析+在线测试)

本文摘要: 本文包含15道单选题和5道多选题,涵盖机器学习、深度学习、概率统计和数值计算等多个领域。单选题涉及Transformer的Softmax层作用、最小二乘法拟合、概率密度计算、注意力机制、反向传播问题、ROC曲线用途、截断误差来源等知识点。多选题考察大模型训练技术、BERT/GPT比较、强化学习对齐方法、CNN常见层以及PCA特性等内容。题目设计注重理论与实践结合,既包含数学推导,又关注前沿技术应用,全面检验读者对机器学习核心概念的理解能力。正确答案均附有详细解析,帮助理解相关技术原理。

m0_73659489的博客 147

ES分组聚合Agg nested

类似于select brandId,sum(salesVolume) from live_room group by brandId 分组之后,再进行求和等运算

h321880947的博客 3105

SAP Gateway 中事务码 /IWFND/MAINT_SERVICE 的用法介绍

本文系统梳理了SAP Gateway中/IWFND/MAINT_SERVICE事务码的核心功能与运维实践。作为OData服务管理中樞,它支持服务注册激活、ICF节点配置、系统别名绑定、批量处理等关键操作。文章详解了服务目录、ICF节点、系统别名的配置要点,提供了批量激活、缓存清理、性能监控等实用技巧,并针对常见陷阱(如传输配置、删除残留)给出解决方案。通过制造业批量激活、零售业OAuth集成等案例,展示了事务码在企业级应用中的实际价值,为SAP Gateway运维提供了一套完整的治理清单。

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 318

jre9下载 jdk9

(Java SE Runtime Environment 9.0) 9.0u175 官方最新版 【x86|x64】

# ElasticSearch关于对数组聚合的问题(**[nested] nested path is not nested**)

ElasticSearch关于对数组聚合([nested] nested path is not nested)的问题 记录一下使用ES时对数组类型数据进行聚合处理时的坑: 由于ES官方自己说的对于所有类型的数据都默认支持数组形式,所以我在创建索引时没有指定nested类型, 首先创建如下索引(并没有指定user的类型): 索引结构如下: 这个时候user存的是一个数组,数组中有两个object类型数据,现在假设需求是要按分数分组,然后统计每个分数下各个人的名字和数量。通常就是两个terms聚合搞定:

weixin_43753197的博客 7237

Data-Structures-and-Algorithm-Analysis-in-Java.pdf

作者: Weiss, Mark A. 出版社: Addison Wesley Data Structures and Algorithm Analysis in Java is an “advanced algorithms” book that fits between traditional CS2 and Algorithms Analysis courses. In the old ACM Curriculum Guidelines, this course was known as CS7. This text is for readers who want to learn good programming and algorithm analysis skills simultaneously so that they can develop such programs with the maximum amo...

Elasticsearch中object类型与nested类型以及数组之间的区别_es objec类型

/ 不知道从哪个版本改了,现在必须写 “categoryNst.class2”: “补水”,否则报错。“categoryObj.class1”: [“欧莱雅”,“欧莱雅”,“雅诗兰黛”],“categoryObj.class3”: [“面部护理”,“面部精华”,“面霜”]“categoryObj.class2”: [“补水”,“补水”,“美白”],“name”: “L'oreal/欧莱雅复颜玻尿酸水光充盈导入膨润精华液”,“name”: “L'oreal/欧莱雅复颜玻尿酸水光充盈导入膨润精华液”,

2401_89791606的博客 862

win10 跳过U8环境检测的IE WebControls.rar

win10 安装u8的时候 提示IE WebControls 不通过,这个工具可以欺骗u8的检查。 跳过U8环境检测的IE WebControls。提示导入失败后,重新检测通过。

ElasticSearch Nested类型全文检索、聚合查询

以上创建索引语句中实现全文检索重点为和,nested类型中哪个text类型的字段需要全文检索,就在字段上加以上可以看到实现nested类型全文检索。

weixin_43207039的博客 2877

ES nested 聚合统计仅符合过滤的子项

ES nested 统计仅符合的子项 相似SQL select sum(item.sku_cnt) from table_main main left join table_item item on main.id = item.main_id where main.id in (4,5,6) and item.sku_id is not null; 2.ES queryDSL查询 { "size": 0, "query": { "bool": {

liaofucheng123的博客 2347

elasticsearch query bool nested对象 聚合

复杂的查询: 下面的查询是小编自己研究写的一个比较复杂,的语句。涉及到查query ,bool must,已经过滤条件term 关键词介绍 from : 表示从第几条开始返回 size: 表示返回的题目数大小。 query :查询语句 bool 、must、 should 是拼接sql中的where条件,bool 、must组合表示 and,bool 、should 组合表示 or。 range...

柳牧之的博客 2572

java+es+nested_es~通过ElasticsearchTemplate进行聚合~Nested嵌套聚合

Nested是一种嵌套文档,类似于父子文档,它可以将与主文档有关的数据进行存储,可以把它理解成一张子表,它的查询和聚合性能很好;更新性能一般。下面是测试使用的数据结构,一个包含Nested属性的实体@Document(indexName = "esdto", type = "esdto")@Data@ToString(callSuper = true)@AllArgsConstructor@NoA...

weixin_39528994的博客 1306

ElasticSearch nested类型求聚合

文章目录nested类型聚合: 正则查询 POST bdp_dev_profile_user_basic_label/_search { "query": { "regexp":{ "office_company.keyword": ".*,dy,.*" } } } PUT my_example/_doc/1 { "content":"This is a good network" } POST my_example/_search { "query":

ChengYanan的博客 1608

Elasticsearch nested字段之 exists 聚合不准确

问题描述: 在聚合嵌套文档的时候,使用exists剔除不存在的字段。起初认为下面两种写法的是一样的。 第一种: { "aggs": { "人数": { "filter": { "nested": { "path": "t_tyyw_xj_ysgs_xyr", "query": { "exists": { "field": "t_tyyw_xj_ysgs_xyr.sjrq"

Y_anger的博客 1382

Es 聚合查询 nested分组聚合时无需指定字段类型

行程单索引,一个订单对应多个游客,将游客信息采用nested类型存入订单索引中。//在最外层的查询将agg聚合设置进去,并且使用nested。2.nested分组聚合查询。//统计出现频数最多的前5条。统计游客来源地top5。

qq_37158147的博客 1326
上一篇: 【Elasticsearch】multi terms aggregation
下一篇: 【Elasticsearch】parent aggregation
risc12306
博客等级 码龄9年 1075粉丝 716原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值
⌂ 换网址