天蓝色数据工厂数据集清理

Question

有人告诉我如何清理 Azure 数据工厂数据集（删除、删除等）。是否有任何策略或设置来控制它？

据我所知，所有时间序列的数据集都完好无损。

假设，我想开发一个活动，它每天覆盖 Azure Blob 或 Data Lake 存储中目标文件夹中的数据（例如，它映射到 Azure Datawarehouse 中的外部表，它是一个完整的数据提取）。我怎样才能通过复制活动来实现这一点？我是否应该添加自定义 .Net 活动来自己清理不再需要的数据集？

Answer 1

是的，您需要一个自定义活动来删除管道输出。 您可能拥有覆盖相同输出的管道活动，但您必须小心了解 ADF 切片模型和活动依赖项的工作原理，以便使用输出的任何内容都获得清晰且可重复的集合。