我需要删除索引到 Elasticsearch 的所有文档中的一个字段。我该怎么做？
【问题讨论】：
标签： elasticsearch
@backtrack 说的是真的，但是在 Elasticsearch 中有一种非常方便的方法可以做到这一点。 Elasticsearch 会抽象出删除的内部复杂性。 您需要使用更新 API 来实现这一点 -
curl -XPOST 'localhost:9200/test/type1/1/_update' -d '{
"script" : "ctx._source.remove(\"name_of_field\")"
}'
您可以找到更多文档here。
注意：从 Elastic Search 6 开始，您需要包含内容类型标头：
-H 'Content-Type: application/json'
【讨论】：
ctx._source[\"my-field\"].remove(\"subfield\")。
Elasticsearch 在 2.3 中添加了 update_by_query。这个实验性界面允许您对匹配查询的所有文档进行更新。
在内部 elasticsearch 进行扫描/滚动以收集批量文档，然后像批量更新界面一样更新它们。由于没有网络和序列化的开销，这比使用您自己的扫描/滚动界面手动执行要快。每条记录都必须加载到内存中，修改然后写入。
昨天我从我的 ES 集群中删除了一个大字段。在 update_by_query 期间，我看到每秒 10,000 条记录的持续吞吐量受到 CPU 而不是 IO 的限制。
如果集群有其他更新流量，请查看设置conflicts=proceed，或者当其中一个记录在其中一个批次下更新时，整个作业将在达到ConflictError 时停止。
类似地设置wait_for_completion=false 将导致update_by_query 通过tasks 接口运行。否则，如果连接关闭，作业将终止。
网址：
http://localhost:9200/INDEX/TYPE/_update_by_query?wait_for_completion=false&conflicts=proceed
POST 正文：
{
"script": "ctx._source.remove('name_of_field')",
"query": {
"bool": {
"must": [
{
"exists": {
"field": "name_of_field"
}
}
]
}
}
}
从 Elasticsearch 1.43 开始，内联 groovy scripting is disabled by default。您需要通过将script.inline: true 添加到您的配置文件中来启用它，这样的内联脚本才能工作。
或者将 groovy 作为脚本上传并使用"script": { "file": "scriptname", "lang": "groovy"} 格式。
【讨论】：
您可以使用_update_by_query
索引：my_index
字段：user.email
POST my_index/_update_by_query?conflicts=proceed
{
"script" : "ctx._source.user.remove('email')",
"query" : {
"exists": { "field": "user.email" }
}
}
索引：my_index
字段：total_items
POST my_index/_update_by_query?conflicts=proceed
{
"script" : "ctx._source.remove('total_items')",
"query" : {
"exists": { "field": "total_items" }
}
}
【讨论】：
以前的答案对我不起作用。
我必须添加关键字“内联”：
POST /my_index/_update_by_query
{
"script": {
"inline": "ctx._source.remove(\"myfield\")"
},
"query" : {
"exists": { "field": "myfield" }
}
}
【讨论】：
默认情况下这是不可能的，因为现在 Lucene 不支持它。基本上，您只能从 Lucene 索引中放置或删除整个 Lucene 文档。
此答案对版本
【讨论】：
对于那些坚持使用 bulk API 的人，实现删除文档字段的替代方法是在批量 API 调用的 update action payload 中提供额外的脚本。
命令部分与官方文档中描述的相同：
curl -s -H "Content-Type: application/x-ndjson" -H "Accept: application/json; indent=4;" \
--data-binary '@es_bulk_edit_data.json' --request POST \
"http://YOUR_ELASTICSEARCH_HOST:PORT_NUM/OPTIONAL_INDEX/OPTIONAL_TYPE/_bulk?pretty"
在请求正文文件中，可能需要为同一个文档使用2个payload，其中一个用于创建、更新字段，另一个用于通过脚本删除字段，可能是这样的：
// assume you attempt to add one field `artist`, update one field `num_views`,
// and delete one field `useless` in the document with type t1 and ID 123
{"update": {"_type": "t1", "_id": "123"}}
{"doc": {"artist": "new_artist", "num_views": 67}}
{"update": {"_type": "t1", "_id": "123"}}
{"script": {"source": "ctx._source.remove(params.del_field_name)", "lang":"painless", "params":{"del_field_name": "useless"}}}
注意：
doc 部分不能与 script 部分放在同一个有效负载中，ElasticSearch 似乎拒绝处理这种有效负载结构并返回错误响应400 bad request，原因消息将为Validation Failed: 1: can't provide both script and doc;。这就是为什么我将删除和所有其他操作在 2 个有效负载中分开。【讨论】：
PUT /products/_update/1
{
"docs" :{
"price": 12,
"quantity": 3,
"in_stock": 6
}
}
Now if I need to remove "quantity" then:
POST products/_update/1
{
"script": {
"source": "ctx._source.remove(\"quantity\")"
}
}
【讨论】：
我想在前面的答案中补充一点，删除字段后，索引的大小不会改变。将不得不创建一个新索引或使用 _reindex api。
curl -X POST "localhost:9200/_reindex?pretty" -H 'Content-Type: application/json' -d'
{
"source": {
"index": "old-index"
},
"dest": {
"index": "new-index"
}}
'
【讨论】：