【问题标题】:Can SOLR perform an UPSERT?SOLR 可以执行 UPSERT 吗?
【发布时间】:2019-01-26 20:54:20
【问题描述】:

我一直在尝试在 solr 中执行相当于 UPSERT(如果已经存在则插入或更新)的操作。我只知道什么不起作用,并且我阅读的 solr/lucene 文档没有帮助。这是我尝试过的:

curl 'localhost:8983/solr/update?commit=true' -H 'Content-type:application/json' -d '[{"id":"1","name":{"set":"steve"}}]'
{"responseHeader":{"status":409,"QTime":2},"error":{"msg":"Document not found for update.  id=1","code":409}}

我在一个请求中最多可以进行 50 次更新,并且请求可能包含具有专有字段(例如 title_en 和 title_es)的相同 ID。如果有一种方法可以查询是否存在 id 列表,我可以拆分数据并执行单独的插入和更新命令......这将是一个可接受的替代方案,但是否已经有一个处理程序可以做到这一点?在这一点上,我想避免做任何内部例程。

谢谢。

【问题讨论】:

    标签: solr indexing upsert


    【解决方案1】:

    使用 Solr 4.0,您可以使用 Partial update of all those document 仅使用已更改的字段来保持完整文档不变。 id 应该匹配。

    【讨论】:

    • 但如果文档不存在,您会得到:“找不到更新的文档”,这与 upsert 的行为不同
    • 来自线程:" >> 另一个想法:我们可能会切换到默认情况下创建,并使用现有的乐观并发机制 >> 指定文档应该存在。>>因此,如果文档应该存在,请指定 _version_=1,如果您不关心,请指定 _version_=0 >>(默认值)。我刚刚提交了这个更改。“知道这个更改是什么以及如何使用是吗?
    • 不确定。你需要检查它的补丁
    • 我在使用 solr 4.0 alpha 时遇到了这些错误。刚刚用 solr 4.1 进行了测试,这是有效的:curl 'localhost:8983/solr/update?commit=true' -H 'Content-type:application/json' -d '[{"id":"-1"," description":{"set":"oops"}}]' {"responseHeader":{"status":0,"QTime":27}} PS - 部分更新是 upsert 的可怕名称替代品(非常直观)。
    【解决方案2】:

    Solr 不支持开箱即用的 UPSERT 机制。您可以创建记录,也可以更新记录,但语法不同。

    如果您更新记录,您必须确保所有 other 预先插入的字段都已存储(不仅仅是索引)。在幕后,更新会创建一个全新的记录,该记录只是预先填充了以前存储的值。但是如果功能非常深入(可能在 Lucene 本身中)。

    你看过DataImportHandler吗?您反转控制流(从 Solr 开始),但它确实支持检查哪些记录需要更新以及哪些记录需要创建。

    或者您可以只运行像 http://solr.example.com:8983/solr/select?q=id%3A(ID1+ID2+ID3)&fl=id&wt=csv 这样的 solr 查询,让 Solr 查找您的 ID 记录并仅返回它找到的记录的 ID。然后,您可以对其进行后期处理以分割您的更新和插入。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 2023-03-29
      • 2012-11-15
      • 2019-04-11
      • 2014-01-27
      • 1970-01-01
      • 1970-01-01
      • 2016-12-30
      相关资源
      最近更新 更多