【问题标题】:Does Kibana take data from ElasticSearch or LogStash directly?Kibana 是否直接从 ElasticSearch 或 LogStash 获取数据?
【发布时间】:2015-02-08 00:37:12
【问题描述】:

这可能是一个非常愚蠢的问题,但我在任何 ELK 堆栈的架构概述中都找不到解释。

实时展示数据时,Kibana 是直接使用 LogStash 还是 Kibana 将信息通过 LogStash 放到 ElasticSearch 中后获取?

我之所以这么问,是因为我想即时进行一些自定义查询,以便 Kibana 结果随着时间的推移而优化。

【问题讨论】:

    标签: elasticsearch logstash kibana


    【解决方案1】:

    Kibana 从 ElasticSearch 获取数据。

    【讨论】:

    • 您是否也知道它使用什么来提取数据? (即查询或其他)
    • Kibana 3 仅在您的浏览器中运行并使用查询(您可以在浏览器的开发人员模式下打开网络选项卡以查看确切的查询)。 Kibana 4 有服务器端组件,所以我不能 100% 确定它是否使用 HTTP API。
    【解决方案2】:

    正如 Kresimir Nesek 告诉您的,Kibana 使用 REST API 从 Elasticsearch 搜索中获取数据。数据之前由 logstash 解析和索引(如果您使用它)并发送到 elasticsearch 进行存储。

    Kibana 3 和 4 都使用 REST API 或 Elasticsearch 进行查询。更多信息请见官方documentation。

    您可能对 Elasticsearch 节点/集群管理感兴趣,我推荐您this Elasticsearch 的管理/监控接口。

    【讨论】:

    • 非常感谢您的意见。我将借此机会提出另一个问题:您知道用于自动检测 ElasticSearch 数据中的模式的项目/工具吗?我正在寻找一种方法来获取周期性数据流、分析它们并自动检测模式,然后在用户帮助下对其进行优化。
    • 在我看来,Elasticsearch 所做的唯一事情就是存储和搜索您的数据。您所说的是“分析”数据,您的数据必须在进入 Elasticsearch 之前进行分析。 Elasticsearch 只允许您有效地搜索分析的数据。因此,您可以使用 logstash 或其他等效软件来做您想做的事情。如果您绝对希望在此过程中实现自动化,您可能会对“机器学习”感兴趣,但我无法就这个主题给您任何建议。
    • 我明白了。根据我一直在阅读的内容,该方法将使用 Hadoop,它在进行机器学习和进行我迫切需要的“追捧”模式发现方面开辟了许多可能性。
    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 2017-07-16
    • 2014-03-28
    • 1970-01-01
    • 2019-09-08
    • 2015-08-05
    • 1970-01-01
    • 2015-09-17
    相关资源
    最近更新 更多