【问题标题】:Logstash & Elasticsearch mass log processLogstash & Elasticsearch 海量日志流程
【发布时间】:2014-05-18 17:01:13
【问题描述】:

我想知道处理海量日志文件的最佳配置是什么 - 我已启用 AWS 新功能、ELB 日志,并希望使用 logstash 将所有内容发送到弹性搜索,

我每天有近 4 亿个请求,我应该选择哪种架构?

最好的问候。

【问题讨论】:

    标签: amazon-web-services elasticsearch logstash


    【解决方案1】:

    对于 Logstash/Elasticsearch,它“完全取决于”您的事件、Logstash 配置的复杂程度以及结果事件的复杂程度。 最好的方法是在一台机器上用一个分片启动一个索引并在其上触发事件,直到找到限制为止。 使用 Logstash 处理事件的过程相同。

    然后,您将获得处理大量事件所需的硬件参考。

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 2015-12-12
      • 2014-10-30
      • 2013-05-05
      • 2018-04-15
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2021-09-14
      相关资源
      最近更新 更多