【发布时间】:2017-11-11 17:06:30
【问题描述】:
Apache Spark SQL 操作CACHE table 有一个选项,以便它运行惰性。 但是 UNCACHE 表呢? documentation 是否懒惰什么都不会说。表会立即从缓存中删除,还是会推迟到下一次垃圾收集运行?如果它是懒惰的,有没有办法找出我的表是否仍然缓存?
【问题讨论】:
-
问题2,
spark.catalog.listTables.show -
试一试并查看 Spark UI 中的“存储”选项卡
-
@RaphaelRoth 我更喜欢可以编码的解决方案。
-
@asmaier 你查到了这个:)
标签: apache-spark caching apache-spark-sql