【问题标题】:Transferring data from elasticsearch to influx将数据从 elasticsearch 传输到 influx
【发布时间】:2019-06-09 09:38:01
【问题描述】:

我正在尝试将数据从Elasticsearch 发送到Influxdb。除了编写插件和配置文件之外,还有其他方法可以做到这一点。我对这两个数据库都很陌生,并试图了解整体情况。

另外,我是否理解Kapacitor 处理流入数据,然后将其发送到Kafka 进行流式传输?还是应该只使用 Kapacitor 流式传输数据?

我试图在短时间内学习所有这些新技术,但所有新术语都让我感到困惑。感谢您的时间和帮助。

【问题讨论】:

    标签: elasticsearch apache-kafka influxdb elasticsearch-py kapacitor


    【解决方案1】:

    ElasticSearch 是一个搜索引擎,而不是数据库。 InfluxDB 是一个时间序列数据。我不明白您为什么需要将数据从搜索结果传输到时间序列数据库。

    Kapacitor 可以以两种不同的方式处理数据。在批处理模式或流模式下。假设一些应用程序将传感器数据(或一些时间序列数据)流式传输到 InfluxDb。您可以通过将 kapacitor 设置为流模式来将 Kapacitor 设置为在 InfluxDB 中可用时立即处理该数据。或者,如果您需要每 2 小时处理一次来自 InfluxDB 的数据,您可以将该作业配置为批处理作业。处理完数据后,Kapacitor 可以将数据持久保存在 InfluxDB 中。或者,如果您需要将数据流式传输到 Kafka,Kpacitor 有一个 Kafka 插件。请注意,Kapacitor 的插件比我在回答中提到的要多。

    【讨论】:

      猜你喜欢
      • 2020-06-09
      • 2022-09-28
      • 1970-01-01
      • 1970-01-01
      • 2016-05-26
      • 2016-02-07
      • 1970-01-01
      • 2021-09-02
      • 2016-07-06
      相关资源
      最近更新 更多