【问题标题】:What is LongAdder related to cassandra+spark connector?LongAdder 与 cassandra+spark 连接器有什么关系?
【发布时间】:2019-01-30 02:44:49
【问题描述】:

当我使用 databricks 将数据加载到 cassandra 时,它遇到了问题 引起:java.lang.NoClassDefFoundError: com/twitter/jsr166e/LongAdder

它的简单 saveToCassandra 到表。

我在 maven 中查看了这个 twitter jsr166e jar,它非常旧,于 2013 年添加, 不知道为什么 Spark+cassandra_coonector 没有这个jar

【问题讨论】:

    标签: apache-spark cassandra spark-cassandra-connector databricks


    【解决方案1】:

    该错误表明您缺少依赖项和/或 Spark Cassandra 连接器不在 Spark 应用程序的运行时类路径中。不确定您是如何安装连接器的,但您应该使用 packages 方法来确保满足依赖关系并正确配置连接器。

    阅读更多HERE

    希望对您有所帮助, 帕特

    【讨论】:

    猜你喜欢
    • 2018-04-03
    • 2017-01-13
    • 2015-09-14
    • 1970-01-01
    • 1970-01-01
    • 2016-09-02
    • 2018-05-21
    • 2020-02-12
    • 2014-11-14
    相关资源
    最近更新 更多