调度 EMR 集群

Question

我已经使用 HIVE 和 PIG 构建并存储了查询，我想安排每周运行一次。这些脚本创建 S3 文件并更新 DynamoTables。我可以使用什么来创建 AmazonEMR 集群以按计划自动运行这些脚本。

我在考虑 AWS Data Pipeline，但它似乎需要创建数据节点，我认为这对于我的目的来说是不必要的。

Answer 1

如果在 HiveActivity 上禁用暂存，则无需指定数据节点。

阶段 = 假

请参阅the example in this post。