Logstash 从 API url 中删除过滤器

Question

我正在尝试部署整个 ELK 堆栈，我已成功完成，Kibana 仪表板显示每个 API URL 的性能，但某些 URL 包含过滤器 www.example.com/product/:Productid

例如

• www.example.com/product/100
• www.example.com/product/200 ....等等

我想显示前 5 个性能最差的 URL，以便开发人员可以努力改善响应时间。理想情况下，上述 URL 应该被视为相同，但由于它包含 ProductId，因此被视为不同的 URL

我需要帮助使用简单的逻辑删除此类 URL 过滤器 (ProductId)，例如如果 URL 在最后一个“/”之后包含数字，则删除 API URL 中最后一个“/”后的所有字符，然后推送到 Elasticsearch。所以 应用逻辑后，上述两个 URL 的输出应该相同。

• www.example.com/product/

不胜感激

问候

Answer 1

您可以将 mutate 过滤器与 gsub option 一起使用。

如果您的网址位于名为 url 的字段中，您可以在您的 logstash 配置的过滤器部分中添加以下内容：

 mutate {
    gsub => [
      "url", "[^/]+$", ""
    ]
  }