首页 > 解决方案 > Elasticsearch 过滤器不过滤

问题描述

我有 Elasticsearch 查询,我试图过滤具有特定类型“源”的结果,但无论过滤器值如何,查询都会产生相同数量的结果。

{
    "query": {
        "script_score": {
            "query": {
                "bool": {
                    "filter": {
                        "term": {
                            "source": "network"
                        }
                    },
                    "must": {
                        "multi_match": {
                            "query": "",
                            "cutoff_frequency": 0.001,
                            "type": "best_fields",
                            "fields": [
                                "body"
                            ]
                        }
                    }
                }
            },
            "script": {
                "source": "cosineSimilarity(params.query_vector, doc['body_vector'])"
            }
        }
    },
    "highlight": {
        "fields": {
            "*": {}
        }
    }
}

我尝试将源类型更改为关键字,但这并没有改变任何东西。

索引映射如下。

{
    "mappings": {
        "_source": {
            "enabled": "true"
        },
        "properties": {
            "body": {
                "type": "text"
            },
            "source": {
                "type": "text"
            },
            "body_vector": {
                "dims": 512,
                "type": "dense_vector"
            },
        },
        "dynamic": "true"
    }
}

下面的示例文档。

{"body": "Lorem ipsum dolor sit amet, consectetur adipiscing elit. Aenean malesuada quis neque et volutpat. Integer sodales nec odio a suscipit. Morbi bibendum ut velit sed sagittis. Nulla id nibh porta, finibus tellus sit amet, dignissim eros. Nulla malesuada est mollis odio dignissim, in imperdiet quam ultricies. Proin velit velit, congue ut mollis sit amet, blandit id lorem. Sed interdum viverra augue. Nulla porttitor, elit sit amet euismod ultrices, libero lorem elementum ligula, eu facilisis urna enim sed purus. Proin tempor aliquam turpis. Nulla eget magna lectus. Donec ultricies erat eu tellus hendrerit dignissim.",  "filename": "Filename 1",  "source": "network",  "documenttype": "docx",  "lastmodified": "158262531",  "title": "" }
{"body": "Lorem ipsum dolor sit amet, consectetur adipiscing elit. Aenean malesuada quis neque et volutpat. Integer sodales nec odio a suscipit. Morbi bibendum ut velit sed sagittis. Nulla id nibh porta, finibus tellus sit amet, dignissim eros. Nulla malesuada est mollis odio dignissim, in imperdiet quam ultricies. Proin velit velit, congue ut mollis sit amet, blandit id lorem. Sed interdum viverra augue. Nulla porttitor, elit sit amet euismod ultrices, libero lorem elementum ligula, eu facilisis urna enim sed purus. Proin tempor aliquam turpis. Nulla eget magna lectus. Donec ultricies erat eu tellus hendrerit dignissim.",  "filename": "Filename 2",  "source": "network",  "documenttype": "docx",  "lastmodified": "158262531",  "title": "" }
{"body": "Lorem ipsum dolor sit amet, consectetur adipiscing elit. Aenean malesuada quis neque et volutpat. Integer sodales nec odio a suscipit. Morbi bibendum ut velit sed sagittis. Nulla id nibh porta, finibus tellus sit amet, dignissim eros. Nulla malesuada est mollis odio dignissim, in imperdiet quam ultricies. Proin velit velit, congue ut mollis sit amet, blandit id lorem. Sed interdum viverra augue. Nulla porttitor, elit sit amet euismod ultrices, libero lorem elementum ligula, eu facilisis urna enim sed purus. Proin tempor aliquam turpis. Nulla eget magna lectus. Donec ultricies erat eu tellus hendrerit dignissim.",  "filename": "Filename 3",  "source": "local",  "documenttype": "docx",  "lastmodified": "158262531",  "title": "" }
{"body": "Lorem ipsum dolor sit amet, consectetur adipiscing elit. Aenean malesuada quis neque et volutpat. Integer sodales nec odio a suscipit. Morbi bibendum ut velit sed sagittis. Nulla id nibh porta, finibus tellus sit amet, dignissim eros. Nulla malesuada est mollis odio dignissim, in imperdiet quam ultricies. Proin velit velit, congue ut mollis sit amet, blandit id lorem. Sed interdum viverra augue. Nulla porttitor, elit sit amet euismod ultrices, libero lorem elementum ligula, eu facilisis urna enim sed purus. Proin tempor aliquam turpis. Nulla eget magna lectus. Donec ultricies erat eu tellus hendrerit dignissim.",  "filename": "Filename 4",  "source": "local",  "documenttype": "docx",  "lastmodified": "158262531",  "title": "" }

查询应该只返回 source = network 的前 2 个文档。

有什么想法吗?

标签: elasticsearchelasticsearch-dsl

解决方案


使用您的示例映射和文档以及以下搜索查询,它会返回包含sourceas 的onlt 文档network

搜索查询

{
  "query": { 
    "bool": { 
      "filter": [ 
        { "term":  { "source": "network" }} -> filter all docs which contains network in source field.
      ]
    }
  }
}

结果

"hits": [
            {
                "_index": "so_60746695_dsl",
                "_type": "_doc",
                "_id": "1",
                "_score": 0.0,
                "_source": {
                    "body": "Lorem ipsum dolor sit amet, consectetur adipiscing elit. Aenean malesuada quis neque et volutpat. Integer sodales nec odio a suscipit. Morbi bibendum ut velit sed sagittis. Nulla id nibh porta, finibus tellus sit amet, dignissim eros. Nulla malesuada est mollis odio dignissim, in imperdiet quam ultricies. Proin velit velit, congue ut mollis sit amet, blandit id lorem. Sed interdum viverra augue. Nulla porttitor, elit sit amet euismod ultrices, libero lorem elementum ligula, eu facilisis urna enim sed purus. Proin tempor aliquam turpis. Nulla eget magna lectus. Donec ultricies erat eu tellus hendrerit dignissim.",
                    "filename": "Filename 1",
                    "source": "network",
                    "documenttype": "docx",
                    "lastmodified": "158262531",
                    "title": ""
                }
            },
            {
                "_index": "so_60746695_dsl",
                "_type": "_doc",
                "_id": "2",
                "_score": 0.0,
                "_source": {
                    "body": "Lorem ipsum dolor sit amet, consectetur adipiscing elit. Aenean malesuada quis neque et volutpat. Integer sodales nec odio a suscipit. Morbi bibendum ut velit sed sagittis. Nulla id nibh porta, finibus tellus sit amet, dignissim eros. Nulla malesuada est mollis odio dignissim, in imperdiet quam ultricies. Proin velit velit, congue ut mollis sit amet, blandit id lorem. Sed interdum viverra augue. Nulla porttitor, elit sit amet euismod ultrices, libero lorem elementum ligula, eu facilisis urna enim sed purus. Proin tempor aliquam turpis. Nulla eget magna lectus. Donec ultricies erat eu tellus hendrerit dignissim.",
                    "filename": "Filename 2",
                    "source": "network",
                    "documenttype": "docx",
                    "lastmodified": "158262531",
                    "title": ""
                }
            }
        ]

推荐阅读