如何以 hadoop.hive.serde2.OpenCSVSerde 格式查询 Athena 字符串的日期

Question

您好，我在 AWS Athena 中创建了以下架构以从 AWS S3 读取 csv 文件

CREATE EXTERNAL TABLE IF NOT EXISTS axlargetable.mine (
  createdate string
)
ROW FORMAT SERDE 'org.apache.hadoop.hive.serde2.OpenCSVSerde'
WITH SERDEPROPERTIES (
   'separatorChar' = ',',
   'quoteChar' = '\"',
   'escapeChar' = '\\'
   ) 
LOCATION 's3://ax-large-table/test/'
TBLPROPERTIES ('has_encrypted_data'='false')

“createdate”列包含以下值

7/01/2017 5:40:05 PM
7/03/2017 5:40:05 PM
7/04/2017 5:40:05 PM
7/05/2017 5:40:05 PM
7/06/2017 5:40:05 PM
7/31/2017 5:40:05 PM
7/31/2017 5:40:05 PM
7/31/2017 5:40:05 PM
7/31/2017 5:40:05 PM

如何以日期格式查询“createdate”列值？示例查询，如

Select * from axlargetable.mine 
where createdate between '7/03/2017' and '7/31/2017'

谢谢

Answer 1

恐怕 OpenCSVSerDe 不支持解析具有某些非 ISO 格式的 date 类型。避免这种行为的唯一方法是将字符串转换为查询中的日期。

在这种情况下，您需要使用parse_date 函数。

select * from axlargetable.mine
where date_parse(createdate, '%m/%d/%Y %h:%i:%s %p') 
          between DATE'2017-03-07' and DATE'2017-07-31';