【发布时间】:2021-04-09 16:34:37
【问题描述】:
有没有一种方法可以使用表名而不是路径来读取增量表版本。我正在寻找这个用例的原因是,分析师团队只想知道 2021-02-07 表的完整快照,但他/她只知道表名,他们不知道 ADLS PATH 的实际位置数据驻留。
我们可以从 Databricks 文档中阅读如下版本:
# Time travel read
df = spark.read.format("delta").option("timestampAsOf", "2021-02-07").load("PATH OF THE TABLE")
我在寻找什么:
df = spark.read.format("delta").option("timestampAsOf", "2021-02-07").load("TABLE_NAME")
任何帮助将不胜感激。
【问题讨论】:
标签: pyspark delta-lake