Elasticsearch wiele zapytań / wyszukiwanie w Pythonie

Sep 26 2020

Jestem nowy w Pythonie i Elasticsearch i utworzyłem indeks z niektórymi danymi w Elasticsearch i chcę wykonać na nich zapytanie za pomocą Pythona na podstawie niektórych filtrów, które są odbierane od użytkownika (słowo kluczowe, kategoria)

from elasticsearch import Elasticsearch
import json,requests

es = Elasticsearch(HOST="http://localhost", PORT=9200)
es = Elasticsearch()

def QueryMaker (keyword,category):
   response = es.search(index="main-news-test-data",body={"from":0,"size":10000,"query":{
       "bool": {
      "should": [
        {
          "multi_match" : {
            "query":      keyword,
            "fields":     [ "content", "title","lead" ]
          }
        },
        {
          "multi_match" : {
            "query":      category,
            "fields":     [ "category" ]
          }
        }
      ]
    }
   }})
   return(response)

def Mapper (category):
 fhandle = open('categories.txt','r', encoding="utf8")
 for line in fhandle:
     line = line.rstrip()
     items = line.split(';')
     if f'"{category}"' in items:
         category = items[0]
         return(category)

if __name__ == '__main__': 
    keyword = input('Enter Keyword: ')
    print(type(keyword))
    category = input('Enter Category: ')
    print(type(category))
    #startDate = input('Enter StartDate: ')
    #endDate = input('Enter EndDate: ')
    
    mapCategory = Mapper(category)
    if mapCategory is not None:
      mapCategory = mapCategory.replace("%","")
      data = QueryMaker(keyword,mapCategory)
      print(data)
    else:
      data = QueryMaker(keyword,mapCategory)
      print(data)

Problem polega na tym, że ten program zwraca dopasowane dane tylko wtedy, gdy 2 pola są pełne, ale chcę, aby zwracał również dane, jeśli 1 pole, takie jak kategoria, jest puste. Gdy słowo kluczowe jest puste, przypomina „” i nic nie zwraca, a gdy kategoria jest pusta, pojawia się następujący błąd:

elasticsearch.exceptions.RequestError: RequestError(400, 'x_content_parse_exception', '[multi_match] unknown token [VALUE_NULL] after [query]')   

Co robię źle i jak mogę naprawić mój filtr wyszukiwania?

Odpowiedzi

ESCoder Sep 27 2020 at 01:57

Dodanie działającego przykładu z danymi indeksu, zapytaniem wyszukiwania i wynikiem wyszukiwania

Zgodnie z Twoimi komentarzami wymienionymi powyżej, jeśli contentpole nie zawiera keyword, a jeśli categorypole zawiera category, zapytanie wyszukiwania zostanie wykonane dla categorypola. Można to osiągnąć za pomocąminimum_should_match

Dane indeksowe:

{
    "content": "keyword a",
    "title": "b",
    "lead": "c",
    "category": "d"
}
{
    "content": "a",
    "title": "b",
    "lead": "c",
    "category": "category"
}
{
    "content": "keyword a",
    "title": "b",
    "lead": "c",
    "category": "category"
}

Wyszukiwana fraza:

{
  "query": {
    "bool": {
      "should": [
        {
          "multi_match": {
            "query": "keyword",
            "fields": [
              "content",
              "title",
              "lead"
            ]
          }
        },
        {
          "multi_match": {
            "query": "category",
            "fields": [
              "category"
            ]
          }
        }
      ],
      "minimum_should_match":1
    }
  }
}

Wynik wyszukiwania:

"hits": [
      {
        "_index": "stof_64081587",
        "_type": "_doc",
        "_id": "3",
        "_score": 0.9666445,
        "_source": {
          "content": "keyword a",
          "title": "b",
          "lead": "c",
          "category": "category"
        }
      },
      {
        "_index": "stof_64081587",
        "_type": "_doc",
        "_id": "2",
        "_score": 0.60996956,
        "_source": {
          "content": "keyword a",
          "title": "b",
          "lead": "c",
          "category": "d"
        }
      },
      {
        "_index": "stof_64081587",
        "_type": "_doc",
        "_id": "1",
        "_score": 0.35667494,
        "_source": {
          "content": "a",
          "title": "b",
          "lead": "c",
          "category": "category"
        }
      }
    ]