【问题标题】:How to get only failed documents in the response from Elasticsearch Java High-Level Client 6.8如何在 Elasticsearch Java High-Level Client 6.8 的响应中仅获取失败的文档
【发布时间】:2020-09-24 07:17:18
【问题描述】:

在使用 Elasticsearch Java 高级 REST 客户端进行批量请求时,有什么方法可以在响应中仅获取失败的文档。

目前,ES 正在响应中发送所有成功和失败的文档,我们正在重新处理所有失败的文档,我们正在迭代 BulkItemResponse 以查找失败的文档并重新处理它。

private BulkRequest createBulkRequestsForRetry(BulkResponse bulkItemResponses, BulkRequest currentBulkRequest) {
        BulkRequest bulkRequest = new BulkRequest();
        int index = 0;
        for (BulkItemResponse bulkItemResponse : bulkItemResponses.getItems()) {
            if (bulkItemResponse.isFailed()) {
                bulkRequest.add(currentBulkRequest.requests().get(index));
            }
            index++;
        }
        return bulkRequest;
    }

作为bulkItemResponse.getItems() 表示在批量操作中执行的每个操作(以相同的顺序!)。

【问题讨论】:

  • 已经有一段时间了,如果对您有用,您可以投票并接受答案,如果您需要更多信息,请告诉我。

标签: java elasticsearch bulkinsert resthighlevelclient elasticsearch-rest-client


【解决方案1】:

到目前为止,即使在最新的 7.7 版本的客户端中,此功能也不存在,如果您想要此功能,您可以创建问题或更好地提交解决问题的 PR,这将是一个非常有用的功能.

你可以看看complete BulkResponse,看看你自己在主分支中也没有这样的功能。

也可以here 向 Elasticsearch 创建问题。

【讨论】:

  • 同意。 Doc 说“要仅返回有关失败操作的信息,请使用带有 items.*.error. 参数的 filter_path 查询参数”但这仅适用于 REST API,因为此 filter_path 选项未在 REST 客户端中公开。另见github.com/elastic/elasticsearch/issues/53846
  • @dadoonet 很高兴听到 Elastic 的开发人员宣传员的来信 :) 并感谢您提供现有问题的链接,了解并非常有用,为什么它没有实施。
  • 我刚刚在这个问题上添加了我的想法:)
  • @dadoonet 你增加了很多清晰度。
猜你喜欢
  • 2023-04-04
  • 2021-01-02
  • 2021-11-05
  • 1970-01-01
  • 2021-01-14
  • 2019-12-24
  • 1970-01-01
  • 2020-10-04
  • 1970-01-01
相关资源
最近更新 更多