【发布时间】:2021-12-17 14:10:02
【问题描述】:
我有以下情况。 (一个相当常见的,但我不完全确定从哪里开始)
我有数据传入 blob 存储容器(我们的原始区域)。这些文件每天都会被丢弃在原始区域(有人坐在某个地方)。每天都有新文件进来,旧文件会被覆盖,但记录的数量会增加。
假设昨天的客户文件可能有 100 条记录,今天的文件可能有 150 条记录。 (昨天有 100 个,今天有 50 个)。
现在,进行增量加载(或欢迎其他解决方案)以将最新数量的记录移动到 azure 表存储中的最佳方法是什么。
我在从 sql 加载数据或将数据加载到 sql 时使用过水印等,但对 Azure 表没有太多经验。如果我能得到领导将不胜感激。
提前致谢。
【问题讨论】:
标签: azure-blob-storage azure-table-storage