elasticdump 如何使用偏移量？

Question

当 elasticdump 停止并重新启动时，它会尝试在偏移后执行。 但发生错误。

[执行命令]

nohup ./elasticdump --input=http://host/common --output=http://host/common --type=data --limit=1000 --offset=1000 &

[错误]

发出错误 => {"error":{"root_cause":[{"type":"action_request_validation_exception","re​​ason":"验证 失败：1：不允许在滚动中使用 [from] context;"}],"type":"action_request_validation_exception","re​​ason":"验证 失败：1：不允许在滚动中使用 [from] 上下文;"},"状态":400}

如何使用偏移量？？？

Answer 1

来自elasticdump project中的注释：

如果您使用的是 Elasticsearch 6.0.0 或更高版本，则 scrollContext 中不再允许使用偏移参数

您可以采取的措施来防止这种情况（只要您不跨越10000 limit）就是不使用offset 参数（即没有滚动上下文）并提供一个搜索正文，而不是from 和size 设置，像这样：

nohup ./elasticdump --input=http://host/common --output=http://host/common --type=data --searchBody='{"from": 1000, "size": 1000, "query": { "match_all": {} }}' &

更新：

如果您有超过 10K 条记录并且 elasticdump 容易中途停止，我建议利用 snapshot/restore feature 将数据从一台服务器移动到另一台服务器。