【发布时间】:2019-08-30 19:55:49
【问题描述】:
将监视器小部件恢复到 EMR Jupyter Notebook 需要哪些代码或配置或步骤?
https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-managed-notebooks-spark-monitor.html 发现这个: https://forums.aws.amazon.com/thread.jspa?threadID=308132 (日期为 2019 年 8 月 15 日)
sc
Starting Spark application
ID YARN Application ID Kind State Spark UI Driver log 当前会话? 36 application_blahblahblahsomenumber pyspark idle Link Link ✔
SparkSession 可用作“火花”。
但运行正常程序并没有显示预期的监控
比如分区数,经过的秒数等。
它只是默默地运行,除了代码旁边的星号In [*]
什么给了?
请参阅以下部分中的图形: “以下是 Spark 作业监控小部件的示例。 从页面" 在此页面上:
https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-managed-notebooks-spark-monitor.html
【问题讨论】:
标签: pyspark widget jupyter monitor