【问题标题】:DynamoDB Table Design SuggestionDynamoDB 表设计建议
【发布时间】:2022-02-07 12:02:51
【问题描述】:

需要指导来设计 DynamoDB 表。
以下是我的示例数据。

FinanceType ModelName ModelCode ModelYear MoreAttributes ...
Lease Avalon TA1 2021 .....
Lease Camry TC1 2021 .....
Lease Sienna TS1 2021 .....
Loan Avalon TA1 2021 .....
Loan Camry TC1 2021 .....
Loan Sienna TS1 2021 .....
Lease Avalon TA1 2020 .....
Lease Camry TC1 2020 .....
Lease Sienna TS1 2020 .....
Loan Avalon TA1 2020 .....
Loan Camry TC1 2020 .....
Loan Sienna TS1 2020 .....

FinanceType + ModelCode + ModelYear 的组合使记录独一无二。
访问模式是为给定的 FinanceType、ModelCode 和 ModelYear 查找 MoreAttributes。
如何将我的表设计为具有正确的分区键和排序键,以使数据均匀分布且没有热分区?

【问题讨论】:

  • 为什么不添加一个称为序列号的属性,它是唯一的,因此成为 PK 和模型名称作为排序键,以便您可以查询基于模型名称的多个记录,然后过滤掉更多属性跨度>
  • 表格设计需要根据您的访问模式来完成。所以仅仅知道字段是不足以有一个好的表格设计的。如果您不确定您访问的模式是什么,您可能最终需要创建 GSI -docs.aws.amazon.com/amazondynamodb/latest/developerguide/…。如果您出于某种原因不想使用 GSI,则可以使用另一个选项,您可以利用 dynamodb 流将另一个数据库作为您的报告存储,并具有更灵活的查询功能。
  • @GuilhermeBrabo。你觉得我对下面答案的最新评论是PK和SK的好选择吗?
  • @DenilParmar,同样,在不知道您的访问模式/数据分布的情况下,任何建议都可能具有误导性。如果每个金融类型有数百万个项目,这看起来是一个糟糕的设计,如果你的表有 100 条记录,并且你不担心扩展,那可能没问题。所以这都是关于你的数据结构的。了解数据分布的工作原理以及只有 2 个值的分区键的含义非常重要:docs.aws.amazon.com/amazondynamodb/latest/developerguide/…

标签: amazon-web-services amazon-dynamodb bigdata


【解决方案1】:

我认为composite key的形式是:

FinanceType#ModelCode#ModelYear

就够了。如果您愿意,可以将ModelName 作为排序键。

【讨论】:

  • 我认为@Marcin 解决方案也是亚马逊推荐的方式aws.amazon.com/blogs/database/…
  • 如果是这种情况,那么例如我的记录看起来像 Pk=Lease#TA1#2021 ...每个逻辑分区将只收到一条记录,因为这种组合对于每条记录都是唯一的。因此,对于每 N 条记录,将创建 N 个分区,每个分区只有一条记录。那正确吗? .如果我错了,请指导我。 @Jatin Mehrotra
  • 不,你没有得到每个分区键的物理分区。关键是用于帮助分配物理分区的内容。遵循@Marcin 的建议。
  • @DenilParmar 每个键没有单独的分区。我回答您的方式是为您的用例推荐的设置。
  • 嘿@marcin!你的解决方案是最好的。我看到的唯一问题是 partitionKey 具有非常高的基数!虽然是最好的解决方案,适合我在前端显示的需求,但如果我需要提取报告,可能会成为瓶颈。我在想 pk="financeType" & sk="modelCode#modelYear"。这可以给我一些报告,例如) 1. 给我所有的“贷款记录”?查询:pk="Loan" 2.给我所有凯美瑞的贷款记录?查询:pk="Lease" sk=begins_with("TC1") 3. 只给我凯美瑞2021的贷款记录。查询:pk="Lease" sk="TC1#2021"。让我知道你的想法
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2011-05-22
  • 1970-01-01
  • 2020-08-07
  • 2019-03-10
相关资源
最近更新 更多