Avro tojson 日期格式答案

【问题标题】：Avro tojson date formatAvro tojson 日期格式
【发布时间】：2017-03-09 06:38:04
【问题描述】：

我使用 sqoop 将带有选定列的表导入到 avro 文件格式。使用 avro-tools tojson 日期以奇怪的格式出现（负数）。如何解码日期？

    {"first_name":{"string":"Mary"},"last_name":  {"string":"Botman"},"birth_date":{"long":-345772800000}}

其中 MySQL 查询格式正确

  mysql> select first_name, last_name, birth_date from employees where first_name like 'Mary' and last_name ='Botman';
  +------------+-----------+------------+
  | first_name | last_name | birth_date |
  +------------+-----------+------------+
  | Mary       | Botman    | 1959-01-17 |
  +------------+-----------+------------+
  1 row in set (0.07 sec)

【问题讨论】：

标签： mysql sqoop avro spark-avro

【解决方案1】：

long值-345772800000代表...

...自标准基准时间以来的指定毫秒数，称为 “时代”，即 1970 年 1 月 1 日 00:00:00 GMT 的数量自 1970 年 1 月 1 日以来的毫秒数

在您的示例中，它是一个负值，因此它从“时代”开始倒计时。在 Java 代码中，您可以从该值创建 LocalDate，如下所示，这将为您提供与 Hive 查询结果相同的结果。

LocalDate date17Jan1959 = Instant.ofEpochMilli(-345772800000L)
    .atZone(ZoneOffset.UTC)
    .toLocalDate();

【讨论】：