Elasticsearch bool query小结

背景

最近有一个线上的es查询问题,最后确定在使用bool query多条件组合查询时出现should子句查询失效,于是查找资料来确定问题所在。

其中Elasticsearch: 5.5.0

问题

找到相关的查询语句:

"query": {
    "bool": {     // bool query 查询
      "should": [ // should子句
        {
          "match_phrase": {
            "name": {
              "query": "星起",
              "boost": 30,
              "slop": 5
            }
          }
        }
      ],
      "filter": { // #filter子句
        "bool": {
          "must": [
            {
              "terms": {
                "round": ["A轮"]
              }
            },
          ]
        }
      }
    }
  }

问题在于:使用 bool query组合查询时,shouldfilter 组合查询的结果只匹配了filter子句,并不匹配should子句,达不到shouldfilter取交集的预期。

解决方法

翻了一下官方文档:Bool Query | Elasticsearch Reference [5.5] | Elastic
should的解释:

The clause (query) should appear in the matching document. If the bool query is in a query context and has a must or filter clause then a document will match the bool query even if none of the should queries match. In this case these clauses are only used to influence the score. If thebool query is a filter context or has neither must or filter then at least one of the should queries must match a document for it to match the bool query. This behavior may be explicitly controlled by settings the minimum_should_match parameter.

大体的意思就是:should子句是在匹配文档中使用的,如果bool查询是在query上下文,并且有must 或者 filter子句时不管should查询是否匹配,都不影响must或者filter子句的查询。这些子句只是影响查询的score而已。如果bool查询是在filter上下文 或者 既没有must也没有filter则应至少一个should查询必须匹配bool查询。也可以显式设置minimum_should_match这个参数来解决。
从官方文档可以看出,有2种方式可以在bool query取各数据的交集:

  1. 将查询的条件,移到filter上下文里
  2. 使用设置minimum_should_match参数
解决方案

用上面提到2种方式,我们分别尝试一下是否可以达到预期目标。

方案一

使用filter上下文:

"query": {
    "bool": {
      "filter": { // filter上下文
        "bool": {
          "should": [ // should子句
            {
              "match_phrase": {
                "name": {
                  "query": "星起",
                  "boost": 30,
                  "slop": 5
                }
              }
            }
          ],
          "filter": { // filter子句
            "bool": {
              "must": [
                {
                  "terms": {
                    "round": ["A轮"]
                  }
                }
              ]
            }
          }
        }
      }
    }
  }

测试结果如下:

"hits": {
    "total": 1,
    "max_score": null,
    "hits": [
      {
        "_index": "index_name",
        "_type": "hub/product",
        "_id": "id",
        "_score": 0.0, // filter下分值为0.0
        "_source": {
          "round": "A轮",
          "name": "星起Starup",
          "created_at": "2015-12-25T22:20:36.210+08:00",
          "sector_name": "企业服务"
        },
        "highlight": {
          "name": ["<em>星起</em>Starup"]
        },
        "sort": []
      }
    ]
  }

测试结果满足shouldfilter子句交集,需要注意结果的分值为0.0, 没有对查询结果匹配程度打分。

方案二

使用minimum_should_match,至少匹配一项should子句,可以如下设置:

"query": {
    "bool": {     
      "should": [ // should 子句
        {
          "match_phrase": {
            "name": {
              "query": "星起",
              "boost": 30,
              "slop": 5
            }
          }
        }
      ],
      "minimum_should_match": 1, // 最少匹配一项should中条件子句
      "filter": { // filter子句
        "bool": {
          "must": [
            {
              "terms": {
                "round": ["A轮"]
              }
            },
          ]
        }
      }
    }
  }

测试结果如下:

"hits": {
    "total": 1,
    "max_score": null,
    "hits": [
      {
        "_index": "index_name",
        "_type": "hub/product",
        "_id": "id",
        "_score": 757.66394,
        "_source": {
          "round": "A轮",
          "name": "星起Starup",
          "created_at": "2015-12-25T22:20:36.210+08:00",
          "sector_name": "企业服务"
        },
        "highlight": {
          "name": ["<em>星起</em>Starup"]
        },
        "sort": [757.66394]
      }
    ]
  }

数据为shouldfilter子句的交集,符合预期的结果,并且有相应的匹配程度分值。

总结

从上面2种解决方案可以看出,Elasticsearch在查询上还是比较灵活,平时除了需要熟悉官方的文档,还要结合业务的需求,才能找到正确解决问题的方法。

转自:https://blog.lovecoding.org/2018/12/18/es-bool-query/

参考
  1. Bool Query | Elasticsearch Reference [5.5] | Elastic
  2. Boolean Operations and Filters in the Bool Query in Elasticsearch | Elastic
  3. ElasticSearch查询 - 博客园
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,204评论 6 506
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,091评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,548评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,657评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,689评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,554评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,302评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,216评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,661评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,851评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,977评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,697评论 5 347
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,306评论 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,898评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,019评论 1 270
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,138评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,927评论 2 355

推荐阅读更多精彩内容

  • 声明:本文转自我的个人博客,有兴趣的可以查看原文。转发请注明来源。 这是一篇科普文。 1. 背景 Elastics...
    此星爷非彼星爷阅读 1,576评论 0 14
  • Neil Zhu,简书ID Not_GOD,University AI 创始人 & Chief Scientist...
    朱小虎XiaohuZhu阅读 13,216评论 0 5
  • pyspark.sql模块 模块上下文 Spark SQL和DataFrames的重要类: pyspark.sql...
    mpro阅读 9,456评论 0 13
  • Elasticsearch安装和配置问题 启动时候报错的问题 max file descriptors [4096...
    AlienPaul阅读 9,182评论 0 1
  • 第六天 一、今天,令到我开心的事情是什么?与我的型号,侧翼,健康和动态什么关系?今天这次,我与以往不同的处理方式是...
    林金琼阅读 159评论 1 2