Laravel ES聚合条件过滤查询缩小统计范围

胖明大大_4071

胖明大大_4071

2026-08-19

944人浏览

原创

聚合前必须先用filter缩小文档集,因es聚合默认在全部匹配文档上运行,未过滤会导致统计失真;filter中条件不打分、可缓存,性能优于must;全文检索用must,过滤逻辑严格放在filter;terms聚合字段须为keyword类型,text字段需通过fields多字段映射支持聚合与检索;嵌套聚合需显式声明nested路径;laravel中需白名单校验用户输入参数并限制数值范围。

laravel es聚合条件过滤查询缩小统计范围

聚合前必须先用 filter 缩小文档集

ES 的聚合(aggs)默认在 query 返回的所有匹配文档上运行,但如果你只关心“已上架且价格 ≤ 5000 的商品”的类目分布,却没提前过滤,聚合结果就会包含下架或高价商品,统计失真。关键点在于:聚合本身不自动过滤,它只“数”你给它的数据。

正确做法是把确定性条件(如状态、范围、精确值)全塞进 bool.filter,再在其外层定义 aggs:

{
  "query": {
    "bool": {
      "filter": [
        {"term": {"sale": true}},
        {"range": {"price": {"lte": 5000}}}
      ]
    }
  },
  "aggs": {
    "by_category": {
      "terms": {"field": "category_id"}
    }
  }
}
  • filter 中的条件不参与相关性打分,可被缓存,性能远高于写在 must 里
  • 别把 match 或 multi_match 放 filter——它们是查询语句,不是过滤器
  • 如果要用全文检索+聚合,必须把检索逻辑放 must,过滤逻辑严格留在 filter,两者共存于同一 bool

terms 聚合字段必须是 keyword 类型

对 category_id 或 brand_name 做 terms 聚合时,如果字段在 mapping 中是 text 类型(默认会分词),ES 会按分词后碎片聚合,比如 “iPhone 15 Pro” 变成 [“iphone”, “15”, “pro”],结果出现大量无意义单字桶。必须确认该字段类型为 keyword:

PUT /products/_mapping
{
  "properties": {
    "category_id": {"type": "keyword"},
    "brand_name": {"type": "keyword"}
  }
}
  • 已有索引无法直接改字段类型,需 reindex;新索引建模阶段就要定死
  • 若字段同时要支持全文检索和聚合,用 fields 多字段映射:"type": "text", "fields": {"keyword": {"type": "keyword"}},聚合时查 brand_name.keyword
  • 别依赖 fielddata: true 强开 text 字段聚合——内存爆炸风险极高,9.x 已默认禁用

嵌套聚合需配合 inner_hits 或 reverse_nested

当商品有 skus 嵌套对象(含库存、颜色等),你想统计“每个颜色下的平均库存”,就不能直接对 skus.color 做 terms 聚合——嵌套字段必须显式声明路径并启用 nested 查询上下文。

Laravel Creem Agent
Laravel Creem Agent

Creem 支付商店助理 — 查询订阅、客户、交易、产品,执行心跳检查,管理本地 Laravel支付商店。

下载

正确结构:

{
  "query": {
    "nested": {
      "path": "skus",
      "query": {
        "bool": {
          "filter": [
            {"term": {"skus.in_stock": true}}
          ]
        }
      }
    }
  },
  "aggs": {
    "by_color": {
      "nested": {"path": "skus"},
      "aggs": {
        "colors": {"terms": {"field": "skus.color"}},
        "avg_stock": {"avg": {"field": "skus.stock"}}
      }
    }
  }
}
  • 外层 nested query 确保只命中有符合条件 sku 的商品文档
  • 内层 nested aggs 指向同一 path,才能正确遍历嵌套对象
  • 漏掉任意一个 nested 声明,ES 会报错或返回空桶

Laravel 中调用原生 client 传参要防注入

用户输入的类目 ID、价格区间等参数如果直接拼进 DSL body,可能触发恶意查询(如通过 script 或 regexp 注入)。Laravel 项目中不能依赖 Scout 的抽象层来“自动防护”——Scout 不校验原始 DSL。

必须手动白名单校验:

  • 价格范围只接受整型:filter_var($request->input('min_price'), FILTER_VALIDATE_INT)
  • 排序字段限定数组:in_array($sort, ['price', 'sales_count', 'created_at'], true)
  • 类目 ID 必须匹配正则 /^\d+(-\d+)*$/(适配 category_path 树形结构)
  • 聚合字段名从固定配置读取,不接受前端传入的任意 field

最易被忽略的是:即使用了 filter,如果用户能控制 range 的 gte/lte 值,仍可能构造超大范围拖垮集群——务必加数值上下限(如 price ≤ 100000)。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

laravel

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
laravel组件介绍
laravel组件介绍

laravel 提供了丰富的组件,包括身份验证、模板引擎、缓存、命令行工具、数据库交互、对象关系映射器、事件处理、文件操作、电子邮件发送、队列管理和数据验证。想了解更多laravel的相关内容,可以阅读本专题下面的文章。

2024.04.09

837

10

laravel中间件介绍
laravel中间件介绍

laravel 中间件分为五种类型:全局、路由、组、终止和自定。想了解更多laravel中间件的相关内容,可以阅读本专题下面的文章。

2024.04.09

815

9

laravel使用的设计模式有哪些
laravel使用的设计模式有哪些

laravel使用的设计模式有:1、单例模式;2、工厂方法模式;3、建造者模式;4、适配器模式;5、装饰器模式;6、策略模式;7、观察者模式。想了解更多laravel的相关内容,可以阅读本专题下面的文章。

2024.04.09

2468

10

thinkphp和laravel哪个简单
thinkphp和laravel哪个简单

对于初学者来说,laravel 的入门门槛较低,更易上手,原因包括:1. 更简单的安装和配置;2. 丰富的文档和社区支持;3. 简洁易懂的语法和 api;4. 平缓的学习曲线。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.10

3661

7

laravel入门教程
laravel入门教程

本专题整合了laravel入门教程,想了解更多详细内容,请阅读专题下面的文章。

2025.08.05

5190

22

laravel实战教程
laravel实战教程

本专题整合了laravel实战教程,阅读专题下面的文章了解更多详细内容。

2025.08.05

3476

13

laravel面试题
laravel面试题

本专题整合了laravel面试题相关内容,阅读专题下面的文章了解更多详细内容。

2025.08.05

6569

7

PHP高性能API设计与Laravel服务架构实践
PHP高性能API设计与Laravel服务架构实践

本专题围绕 PHP 在现代 Web 后端开发中的高性能实践展开,重点讲解基于 Laravel 框架构建可扩展 API 服务的核心方法。内容涵盖路由与中间件机制、服务容器与依赖注入、接口版本管理、缓存策略设计以及队列异步处理方案。同时结合高并发场景,深入分析性能瓶颈定位与优化思路,帮助开发者构建稳定、高效、易维护的 PHP 后端服务体系。

2026.03.04

1376

29

Laravel 框架安装指南
Laravel 框架安装指南

本指南详解 Laravel 框架安装全流程,涵盖 PHP 8.1+ 环境配置、Composer 依赖管理工具安装及国内镜像源优化。重点演示使用 composer create-project 命令创建 Laravel 10/11 项目,解决常见安装错误与依赖冲突。从环境搭建到项目初始化,助您快速完成 Laravel 开发环境部署,为后续 Web 应用开发奠定基础。适合 PHP 初学者与框架迁移开发者参考。

2026.04.09

195

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
如何安装 Composer
如何安装 Composer

共1课时 | 197人学习

Composer手册
Composer手册

共0课时 | 0人学习