【问题标题】:Spark Streaming to MongoDBSpark 流式传输到 MongoDB
【发布时间】:2016-09-21 05:06:41
【问题描述】:

我正在通过 Apache Spark Streaming 从 Apache Kafka 访问数据,因此我想将数据存储在 MongoDB 中,那么我如何将其存储在 mongoDB 中?

【问题讨论】:

标签: mongodb apache-kafka spark-streaming


【解决方案1】:

输出操作非常有限,但您始终可以使用foreachRDD(),您可以在此时间范围内访问任何已处理的 RDD。因此,任何自定义逻辑都可以放在此处,即与 MongoDB 的连接显式执行简单的插入/更新操作。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2018-05-27
    • 1970-01-01
    • 1970-01-01
    • 2020-07-17
    • 2017-05-28
    • 1970-01-01
    • 2016-08-25
    • 1970-01-01
    相关资源
    最近更新 更多