背景
最近有一个线上的es查询问题,最后确定在使用
bool query多条件组合查询时出现should子句查询失效,于是查找资料来确定问题所在。
其中Elasticsearch: 5.5.0
问题
找到相关的查询语句:
"query": {
"bool": { // bool query 查询
"should": [ // should子句
{
"match_phrase": {
"name": {
"query": "星起",
"boost": 30,
"slop": 5
}
}
}
],
"filter": { // #filter子句
"bool": {
"must": [
{
"terms": {
"round": ["A轮"]
}
},
]
}
}
}
}
问题在于:使用 bool query组合查询时,should与filter 组合查询的结果只匹配了filter子句,并不匹配should子句,达不到should和filter取交集的预期。
解决方法
翻了一下官方文档:Bool Query | Elasticsearch Reference [5.5] | Elastic
对should的解释:
The clause (query) should appear in the matching document. If the
boolquery is in a query context and has amustorfilterclause then a document will match theboolquery even if none of theshouldqueries match. In this case these clauses are only used to influence the score. If theboolquery is a filter context or has neithermustorfilterthen at least one of theshouldqueries must match a document for it to match theboolquery. This behavior may be explicitly controlled by settings the minimum_should_match parameter.
大体的意思就是:should子句是在匹配文档中使用的,如果bool查询是在query上下文,并且有must 或者 filter子句时不管should查询是否匹配,都不影响must或者filter子句的查询。这些子句只是影响查询的score而已。如果bool查询是在filter上下文 或者 既没有must也没有filter则应至少一个should查询必须匹配bool查询。也可以显式设置minimum_should_match这个参数来解决。
从官方文档可以看出,有2种方式可以在bool query取各数据的交集:
- 将查询的条件,移到
filter上下文里 - 使用设置
minimum_should_match参数
解决方案
用上面提到2种方式,我们分别尝试一下是否可以达到预期目标。
方案一
使用filter上下文:
"query": {
"bool": {
"filter": { // filter上下文
"bool": {
"should": [ // should子句
{
"match_phrase": {
"name": {
"query": "星起",
"boost": 30,
"slop": 5
}
}
}
],
"filter": { // filter子句
"bool": {
"must": [
{
"terms": {
"round": ["A轮"]
}
}
]
}
}
}
}
}
}
测试结果如下:
"hits": {
"total": 1,
"max_score": null,
"hits": [
{
"_index": "index_name",
"_type": "hub/product",
"_id": "id",
"_score": 0.0, // filter下分值为0.0
"_source": {
"round": "A轮",
"name": "星起Starup",
"created_at": "2015-12-25T22:20:36.210+08:00",
"sector_name": "企业服务"
},
"highlight": {
"name": ["<em>星起</em>Starup"]
},
"sort": []
}
]
}
测试结果满足should与filter子句交集,需要注意结果的分值为0.0, 没有对查询结果匹配程度打分。
方案二
使用minimum_should_match,至少匹配一项should子句,可以如下设置:
"query": {
"bool": {
"should": [ // should 子句
{
"match_phrase": {
"name": {
"query": "星起",
"boost": 30,
"slop": 5
}
}
}
],
"minimum_should_match": 1, // 最少匹配一项should中条件子句
"filter": { // filter子句
"bool": {
"must": [
{
"terms": {
"round": ["A轮"]
}
},
]
}
}
}
}
测试结果如下:
"hits": {
"total": 1,
"max_score": null,
"hits": [
{
"_index": "index_name",
"_type": "hub/product",
"_id": "id",
"_score": 757.66394,
"_source": {
"round": "A轮",
"name": "星起Starup",
"created_at": "2015-12-25T22:20:36.210+08:00",
"sector_name": "企业服务"
},
"highlight": {
"name": ["<em>星起</em>Starup"]
},
"sort": [757.66394]
}
]
}
数据为should与filter子句的交集,符合预期的结果,并且有相应的匹配程度分值。
总结
从上面2种解决方案可以看出,Elasticsearch在查询上还是比较灵活,平时除了需要熟悉官方的文档,还要结合业务的需求,才能找到正确解决问题的方法。