AWS Athena Javascript SDK - 从查询结果创建表 (CTAS) - 指定输出格式

Question

我正在尝试使用 AWS JavaScript Node.JS SDK 使用 AWS Athena 进行查询，并将结果存储在 AWS Glue 中 Parquet 格式的表中（不仅仅是 CSV 文件）

如果我使用控制台，使用 CTAS 查询非常简单：

CREATE TABLE tablename
WITH (
    external_location = 's3://bucket/tablename/',
    FORMAT = 'parquet')
    AS
SELECT *
FROM source

但是使用 AWS Athena JavaScript SDK 我只能使用 Workgoup 或 Output 参数设置输出文件目标并进行基本选择查询，结果将输出到 CSV 文件，并且不会在 AWS Glue 中正确索引，所以如果我尝试使用我得到的 JavaScript SDK 调用该查询，它会破坏它所属的更大过程：

Table properties [FORMAT] are not supported.

我将能够使用 Java SDK JDBC 驱动程序连接选项调用该 DDL 语句。

是否有人熟悉适用于 Node.JS 的 Javascript SDK 的解决方案或变通方法？

Answer 1

运行您在 Athena Web 控制台中发布的 SQL、适用于 JavaScript 的 AWS 开发工具包、适用于 Java 的 AWS 开发工具包或 JDBC 驱动程序之间没有区别，这些都不会处理 SQL，因此如果 SQL 在其中之一中工作这些它将适用于所有这些。只有 Athena 服务会读取 SQL。

检查您的 SQL 并确保您在代码中使用的确实与您在 Web 控制台中尝试过的相同。如果它们确实相同，则错误在您的代码中的其他地方，所以也发布。

---

更新问题是大写的FORMAT。如果您将发布的代码粘贴到 Athena Web 控制台，它会出错并且不会运行查询，但如果您使用 CLI 或 SDK 运行它，则会收到您发布的错误。您在控制台中运行的 SQL 与在 SDK 中运行的 SQL 不同，否则您会在两者中得到相同的错误。

使用小写format 即可。

这绝对是 Athena 中的一个错误，这些属性不应该区分大小写。