【问题标题】:how to index questions and answers in elaticsearch如何在elasticsearch中索引问题和答案
【发布时间】:2018-07-02 18:05:32
【问题描述】:

我正在做一个项目,以在 elasticsearch(版本 6)中为网站的问题和答案编制索引以进行搜索。

我首先想到创建两个索引,如下所示,一个用于问题,一个用于答案。

问题映射:

{"mappings": {
"question": {
  "properties": {
    "title":{
        "type":"text"
    },
    "question": {
      "type":  "text"
    },
    "questionId":{
        "type":"keyword"
    }
  }
}
}
}

答案映射:

{"mappings": {
    "answer": {
      "properties": {
        "answer":{
            "type":"text"
        },
        "answerId": {
          "type":  "keyword"
        },
        "questionId":{
            "type":"keyword"
        }
      }
    }
  }
}

我使用多重匹配查询以及 term 和 top_hits 聚合来搜索索引问答 (referred question)。我使用此方法从搜索结果中删除重复项。作为答案或同一问题的问题本身可以出现在结果中。我只希望结果中的每个问题都有一个条目。我面临的问题是对结果进行分页。在弹性搜索中没有可能对聚合进行分页。它只能对命中而不是聚合进行分页。

然后我想到将问题和答案保存在一个文档中,将答案保存在 Json 数组中。这种方法的问题是没有干净的方法来添加、删除、更新给定问题文档中的特定答案。我发现的唯一方法是使用 groovy 脚本 (referred question)。在 elasticsearch v6 AFAIK 中已弃用。

有没有更好更干净的方法来设计这个? 谢谢。

【问题讨论】:

  • 您能否详细说明为什么会出现重复的搜索结果,如果您可以在 ES 上分享您的查询,将会很有帮助。
  • 当多个答案或问题本身与查询匹配时会出现重复结果,最终指向相同的问题。
  • 如果您将使用父子关系,它也将解决您的重复问题,因为您将使用 has_child 或 has_parent 进行查询或聚合

标签: elasticsearch full-text-search elasticsearch-6


【解决方案1】:

亲子关系

使用父子关系。它类似于嵌套模型,并允许一个实体与另一个实体关联。您可以以一对多的关系将一种文档类型与另一种文档类型相关联。 更多信息在这里:https://www.elastic.co/guide/en/elasticsearch/guide/current/parent-child.html

可以添加、更改或删除子文档,而不会影响父文档或其他子文档。您可以使用 Scroll API 对父文档进行分页。 可以使用 has_parent 连接检索子文档。

权衡:您不必处理重复和分页问题,​​但父子查询可能比等效的嵌套查询慢 5 到 10 倍。

您的映射可能如下所示:

PUT /my-index
{
  "mappings": {
    "question": {
      "properties": {
        "title": {
          "type": "text"
        },
        "question": {
          "type": "text"
        },
        "questionId": {
          "type": "keyword"
        }
      }
    },
    "answer": {
      "_parent": {
        "type": "question"
      },
      "properties": {
        "answer": {
          "type": "text"
        },
        "answerId": {
          "type": "keyword"
        },
        "questionId": {
          "type": "keyword"
        }
      }
    }
  }
}

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2017-03-26
    • 1970-01-01
    • 1970-01-01
    • 2021-04-01
    • 2022-06-13
    • 1970-01-01
    相关资源
    最近更新 更多