【问题标题】:Azure Table Storage - Calculate or Persist TotalsAzure 表存储 - 计算或保留总计
【发布时间】:2011-05-15 10:28:25
【问题描述】:

我正在研究使用表存储来存储一些交易数据,但是,我需要支持一些非常高级的报告,基本上是每天/每月的总数。

我有几个选择:

  • 使用分区/行键结构并动态执行求和
    例如20101101_ITEMID_XXXXXXXX (x = 指导或时间,使唯一) 然后我会使用行键的一部分(ITEMID_201011)查询一个月的数据,并在类型中的“成本”属性上查询总计。

    1000 条记录的查询限制是如何管理的呢? (即如果一天有超过 1000 笔交易,总计会很困难)

  • 使用另一条记录存储当天的总数,并在添加新记录时更新此记录
    例如行键“20101101_ITEMID_TOTAL” 然后查询总天数、月数或年数。

最好的方法是什么?对于这种使用表存储的要求,是否有“最佳实践”?

【问题讨论】:

    标签: azure-storage azure-table-storage


    【解决方案1】:

    我不确定最佳做法是什么,但我可以评论说,我们与 AzureWatch 有类似的情况,并且肯定在表中使用预聚合值。

    主要是出于性能原因——即使您通过单个分区键和行键中的范围进行查询,表存储也不是即时的。下载记录所花费的时间有点长,并且取决于记录可能会使 CPU 飙升,因为它需要将数据反序列化为对象。如果您因为 1000 条记录的限制而多次访问表存储,您也需要支付更多费用。

    需要考虑的其他一些想法:

    您的汇总总数会改变吗?如果不是,这是对预聚合的另一个推动

    在原始数据消失后您是否需要保留汇总值,或者您是否需要清除原始数据?如果是,那么这是对预聚合的又一次推动

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 2020-12-23
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2021-10-18
      相关资源
      最近更新 更多