【问题标题】:What is wrong with appName function?appName 函数有什么问题?
【发布时间】:2020-04-03 03:56:48
【问题描述】:

当我在 jupyter python 中运行 spark 的主函数时,.appName 函数出现错误

spark=ps.sql.SparkSession.builder\
    .master('local[4]')\
     .appName('spark-lecture')\
    .getOrCreate()
sc= spark.sparkContext

Py4JError: JVM 中不存在 org.apache.spark.api.python.PythonUtils.getEncryptionEnabled

【问题讨论】:

    标签: python py4j


    【解决方案1】:

    我认为你没有导入正确的东西。 您是否尝试过以下方法(取自文档):

    from pyspark.sql import SparkSession
    
    spark = SparkSession \
        .builder \
        .master('local[4]') \
        .appName("Python Spark SQL basic example") \
        .getOrCreate()
    

    【讨论】:

      猜你喜欢
      • 2013-05-18
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2021-04-11
      • 2017-03-26
      相关资源
      最近更新 更多