amazon redshift jdbc driver CopyManager.copyIn COPY 命令语法

Question

我正在寻找将什么命令传递给 amazon redshift jdbc 驱动程序CopyManager.copyIn 方法的示例。代码 cmets 明确指出，它旨在为将复制到指定红移表的入站数据接受 STDIN，但我还没有找到任何要传递的命令的示例（使用 sql 参数）。我试过COPY <target_table_name> CSV DELIMITER ',' ，但收到错误消息syntax error at or near "CSV"。

Answer 1

CopyManager 库与 Postgres 配合得很好（对入站数据使用标准输入），但我没有找到解决 Redshift 遇到的错误的方法。 AWS 确实建议通过从 s3 复制来进行批量插入的最佳实践。 COPY <target_table_name> FROM 's3://<s3_bucket_with_path_and_object>' iam_role 'arn:aws:iam::<iam_role>' CSV DELIMETER ',' NULL AS 'NULL' EMPTYASNULL ignoreheader 1。使用 stdin 批量插入 redshift（尤其是从 ec2 实例中）很容易消耗大量内存。使用 s3 批量插入似乎是最佳实践。这并没有具体回答原始问题，但可能暗示了问题的答案。