【发布时间】:2021-08-04 01:39:42
【问题描述】:
我正在探索apache-hudi 框架并关注quick guide。我正在尝试增量查询功能,我们使用列_hoodie_commit_time 来确定增量拉取。我想知道这个专栏的时间戳格式和时区是什么。有人可以帮我吗?这是_hoodie_commit_time 列的示例值:20210730005516。
【问题讨论】:
标签: apache-hudi
我正在探索apache-hudi 框架并关注quick guide。我正在尝试增量查询功能,我们使用列_hoodie_commit_time 来确定增量拉取。我想知道这个专栏的时间戳格式和时区是什么。有人可以帮我吗?这是_hoodie_commit_time 列的示例值:20210730005516。
【问题讨论】:
标签: apache-hudi
_hoodie_commit_time 是执行提交操作的机器当前时间戳。这个时间由火花驱动器决定。 单调递增的时间戳是 YYYYMMDDhhmmss,时区是机器的时区。
一些额外的概念可以在这里找到:https://hudi.apache.org/docs/concepts
【讨论】: