【发布时间】:2020-07-10 08:40:48
【问题描述】:
我正在尝试将 pyspark 数据帧写入 Hbase。面临以下错误。
我的集群上的 Spark 和 Hbase 版本是:
Spark 版本:2.4.0 Hbase版本:1.4.8
火花提交
spark-submit --jars /tmp/hbase-spark-1.0.0.jar --packages com.hortonworks:shc-core:1.1.1-2.1-s_2.11 --repositories http://repo.hortonworks.com/content/groups/public/ --files /etc/hbase/conf/hbase-site.xml to_hbase.py
错误:
任何帮助将不胜感激!
【问题讨论】:
标签: apache-spark pyspark hbase pyspark-sql