【问题标题】:Saving to elastic search from Google Dataflow streaming job从 Google Dataflow 流作业保存到弹性搜索
【发布时间】:2017-02-13 16:48:39
【问题描述】:

我正在通过 Google 数据流流作业将数据保存到 BigQuery。

我想将此数据插入到弹性搜索中以便快速访问。

通过http从数据流中调用logstach是个好习惯吗?

【问题讨论】:

    标签: elasticsearch logstash google-cloud-dataflow


    【解决方案1】:

    Apache Beam Java SDK 有一个connector to read from/write to Elastic search。这应该优化 IO 以与 Beam 模型保持一致。

    【讨论】:

    猜你喜欢
    • 2017-04-07
    • 2019-02-21
    • 2021-03-18
    • 1970-01-01
    • 1970-01-01
    • 2020-12-12
    • 2016-05-20
    • 2020-11-05
    • 1970-01-01
    相关资源
    最近更新 更多