【发布时间】:2018-07-29 16:24:21
【问题描述】:
我有一个带有时间戳列的 spark 数据框。
我想获取该列的前一天日期。然后将时间 (3,59,59) 添加到日期。
当前列中的Ex-值(x1):2018-07-11 21:40:00 前一天日期:2018-07-10 在前一天的日期加上时间(3,59,59)后,应该是这样的: 2018-07-10 03:59:59 (x2) 我想在数据框中添加一列,其中“x2”值对应于所有记录中的“x1”值。
我想要一列,其值等于 (x1-x2).totalDays 的精确双精度值之差
【问题讨论】:
标签: apache-spark pyspark unix-timestamp