将有效负载数据从 dynamodb 复制到 redshift

Question

AWS 的新手。

我想使用 COPY 命令将表从 dynamoDB 导入 Redshift。但是我出现了诸如“无效操作：不支持的数据类型：当前版本仅支持字符串和数字”之类的错误消息。或者我只能在某些列中有值，而其他列（更重要的一个，例如 paylaod 中的传感器值）为空。

在 dynamoDB 中，hashkey 和 rangekey 是 String，但是 payload 是 JSON 格式，我如何将这个 payload 复制到 Redshift？ AWS 中的文档没有提供详细的解决方案。

Answer 1

COPY 命令可用于从具有标量数据类型（即 STRING 和 NUMBER） 的 DynamoDB 表中复制数据。

如果您在 DynamoDB 表中有任何具有不同数据类型（即 Map、List、Set 等）的属性，则 COPY 命令将失败（即目前不支持）。

仅具有标量 STRING 和 NUMBER 数据的 Amazon DynamoDB 属性 支持类型。 Amazon DynamoDB BINARY 和 SET 数据类型是 不支持。如果 COPY 命令尝试加载带有 不支持的数据类型，命令将失败。如果属性确实 与 Amazon Redshift 表列不匹配，COPY 不会尝试 加载它，它不会引发错误。