【问题标题】:Is there a way to load data into cassandra from HDFS?有没有办法从 HDFS 将数据加载到 cassandra 中?
【发布时间】:2023-03-23 22:10:01
【问题描述】:

我正在寻找将数据从 HDFS 加载到 cassandra 的选项。有没有办法达到这个要求?

场景是

i) 我在 cassandra 中创建了一个类似于 HDFS 中可用数据的数据模型

ii) 现在我想将我的 hdfs 数据导出到创建的 cassandra 数据模型。

任何帮助将不胜感激。

谢谢, 卡莱

【问题讨论】:

  • 是的,有一种“后门”方式可以在不查询每条记录的情况下将其推入。
  • @samthebest 你能告诉我如何实现吗?谢谢。

标签: hadoop cassandra hdfs


【解决方案1】:

找到了。

"构建 SSTables 并上传它们 在 reduce 步骤中使用自定义分区器来镜像拓扑”

https://github.com/spotify/hdfs2cass

【讨论】:

  • 谢谢。我会检查这个并回复你。再次感谢
猜你喜欢
  • 1970-01-01
  • 2018-03-31
  • 2013-12-12
  • 1970-01-01
  • 1970-01-01
  • 2017-08-17
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多