搜索除位置列表之外的数组值

Question

我有数以千万计的文件，如下所示。

{
    id: "<some unit test id>",
    groupName: "<some group name>",
    result: [
        1, 0, 1, 1, ... 1
    ]
}

结果字段是一个 200 的数字数组，0 或 1。

我的工作是给定一个组名，比如“group17”和一些数字，比如 3、8、27 查找 groupName 的结果数组元素都等于 1 的所有文档，忽略位置 3、8、27 处的值。

如果有人能指出是否有快速搜索，将不胜感激。

Answer 1

实现所需的一种方法是添加另一个字段，该字段包含 result 数组中包含的位集的等效整数值，然后使用按位与运算。

例如，假设结果数组是

result: [1, 0, 1, 1, 0, 1, 1, 1, 1, 1, 0]

那些位表示的整数值是1470，所以我存储了如下文档：

PUT test/doc/1
{
    "groupName": "group12",
    "result": [
        1, 0, 1, 1, 0, 1, 1, 1, 1, 1, 0
    ],
    "resultLong": "1470"
}

现在，查询看起来像这样

POST test/_search 
{
  "query": {
    "script": {
      "script": {
        "source": """
        // 1. create a BigInt out of the resultLong value we just computed
        def value = new BigInteger(doc['resultLong'].value.toString());

        // 2. create a bitset filled with 1's except for those positions specified in the ignore parameters array
        def comp = IntStream.range(1, 12).mapToObj(i -> params.ignore.contains(i - 1) ? "0" : "1").collect(Collectors.joining());

        // 3. create a BigInt out of the number we've just created
        def compare = new BigInteger(comp, 2);

        // 4. compare both using a bitwise AND operation
        return value.and(compare).equals(compare);
        """,
        "params": {
          "ignore": [1, 4, 10]
        }
      }
    }
  }
}

如果当前索引在params.ignore 数组中，第2 步首先创建一个长度为11 的字符串，用1 或0 填充。我们最终得到字符串"10110111110"。

步骤 3 然后从该字符串（以 2 为基数）创建一个 BigInteger。

第 4 步逐位比较两个数字，即仅当两个数字在相同位置都为 1 时才会返回文档。

注意：对于长度为 200 的数组，您需要使用 IntStream.range(1, 201) 代替。