【问题标题】:Getting a not found error when using split with dataframes将拆分与数据框一起使用时出现未找到错误
【发布时间】:2017-08-02 12:59:55
【问题描述】:

我正在使用 sparkscala。我的以下代码在 spark-shell 上运行良好,但是当我尝试将其移至 Intelij 时,它会抛出错误,指出无法找到 split

我缺少什么,我需要导入什么split 才能工作

var outputDF = inputDF.withColumn(srcColumn, 
split(inputDF.col(srcColumn),splitBy).getItem(selectIndex))

【问题讨论】:

    标签: scala apache-spark


    【解决方案1】:

    你可能错过了这个导入:

    import org.apache.spark.sql.functions._
    

    (在 Spark shell 中自动提供)

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2021-06-25
      • 2018-06-16
      • 1970-01-01
      相关资源
      最近更新 更多