Elasticsearch Query String Query не работает с анализатором синонимов

Я пытаюсь настроить эластичный поиск с синонимами.

Это мои настройки:

                "analysis": {
                    "analyzer": {
                        "category_synonym": {
                            "tokenizer": "whitespace",
                            "filter": [
                                "synonym_filter"
                            ]
                        }
                    },
                    "filter": {
                        "synonym_filter": {
                            "type": "synonym",
                            "synonyms_path": "synonyms.txt"
                        }
                    }
                }

Конфигурация сопоставлений:

        "category": {
            "properties": {
                "name": {
                    "type":"string",
                    "search_analyzer" : "category_synonym",
                    "index_analyzer" : "standard",
                    "fields": {
                        "raw": {
                            "type":  "string",
                            "index": "not_analyzed"
                        }
                    }
                }
            }
        }

И список моих синонимов

film => video,
ooh => panels , poster,
commercial => advertisement,
print => magazine

Должен сказать, что я использую Elasticsearch Java API. Я использую QueryBuilders.queryStringQuery, потому что это единственный способ настроить анализаторы на мой запрос. Итак, когда я делаю:

QueryBuilders.queryStringQuery("name:film").analyzer(analyzer)

Это возвращает меня

[
  {
    "id": 71,
    "name": "Pitch video",
    "description": "... ",
    "parent": null
  },
  {
    "id": 25,
    "name": "Video",
    "description": "... ",
    "parent": null
  }
]

Это идеально для меня, но когда я звоню что-то вроде этого

QueryBuilders.queryStringQuery("name:vid").analyzer(analyzer)

Я ожидаю, что он должен возвращать те же объекты, но ничего: []

Итак, я добавил звездочку к queryStringQuery:

QueryBuilders.queryStringQuery("name:vid*").analyzer(analyzer)

Работает хорошо, но сейчас

QueryBuilders.queryStringQuery("name:film*").analyzer(analyzer)

возвращает меня []

Итак, как мне настроить эластичный поиск, чтобы он возвращал одни и те же объекты при поиске video, vid, film и fil?

Заранее спасибо!


java analyzer synonym elasticsearch
person Sanat Serikuly    schedule 19.04.2017    source источник

Ответы (1)


arrow_upward
1
arrow_downward

Хм, я не думаю, что Elasticsearch сможет «перевести» fil в vid :-). Итак, я думаю, вам нужно edgeNGrams для этого, как во время индексации, так и во время поиска.

PUT test
{
  "settings": {
    "analysis": {
      "analyzer": {
        "category_synonym": {
          "tokenizer": "whitespace",
          "filter": [
            "synonym_filter",
            "my_edgeNGram_filter"
          ]
        },
        "standard_edgeNGram": {
          "tokenizer": "standard",
          "filter": [
            "lowercase",
            "synonym_filter",
            "my_edgeNGram_filter"
          ]
        }
      },
      "filter": {
        "synonym_filter": {
          "type": "synonym",
          "synonyms_path": "synonyms.txt"
        },
        "my_edgeNGram_filter": {
          "type": "edgeNGram",
          "min_gram": 2,
          "max_gram": 8
        }
      }
    }
  },
  "mappings": {
    "test": {
      "properties": {
        "name": {
          "type": "string",
          "analyzer": "category_synonym",
          "index_analyzer": "standard_edgeNGram",
          "fields": {
            "raw": {
              "type": "string",
              "index": "not_analyzed"
            }
          }
        }
      }
    }
  }
}

POST test/test/1
{"name": "Pitch video"}
POST test/test/2
{"name": "Video"}

GET /test/test/_search
{
  "query": {
    "query_string": {
      "query": "name:fil"
    }
  }
}
person Andrei Stefan    schedule 19.04.2017
comment
Работал! Спасибо Андрей! - person Sanat Serikuly; 21.04.2017