【问题标题】:how to import data from mongodb to hive如何将数据从mongodb导入hive
【发布时间】:2015-11-17 04:51:10
【问题描述】:

我想知道如何在 mapreduce 程序的帮助下将数据从 Mongodb 导入 hive。以前我是在 mapreduce 程序的帮助下将数据从 mongodb 导入到 hdfs,现在我想直接从 mongodb 导入数据到 hive。 如果有人能够为此分享任何参考文件,我真的很感激。 提前致谢。

【问题讨论】:

  • 请尽量详细一点。到目前为止,您尝试过什么?

标签: mongodb hadoop hive sqoop


【解决方案1】:

你可以试试Mongo-Hadoop connector。它允许您使用 Mongo 作为 Hive 的后端存储(您可以使用 Hive 查询存储在 MongoDB 中的数据)。

如果您确实需要将数据导入 Hive,您首先需要创建一个(临时)Hive 表,其中包含 mongo 集合,您将从该表中导入数据作为后端。然后,您可以使用 Hive CTAS 查询将数据导入另一个 Hive 表。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2011-08-11
    • 1970-01-01
    • 2014-10-28
    • 2013-04-21
    • 2014-09-28
    • 2020-01-23
    相关资源
    最近更新 更多