【发布时间】:2020-04-01 08:13:47
【问题描述】:
我的数据集有大约 30000 个表。我现在已将它们全部归档到 300 个分区表中。我已经删除了 29700 个表。数据量相同,删除的表都先归档。它会影响使用此数据集每天创建新表的 python 脚本的处理时间吗?
PS:我不关心使用归档表的进程。我担心只使用相同数据集来创建新表的流程。
【问题讨论】:
标签: google-cloud-platform google-bigquery
我的数据集有大约 30000 个表。我现在已将它们全部归档到 300 个分区表中。我已经删除了 29700 个表。数据量相同,删除的表都先归档。它会影响使用此数据集每天创建新表的 python 脚本的处理时间吗?
PS:我不关心使用归档表的进程。我担心只使用相同数据集来创建新表的流程。
【问题讨论】:
标签: google-cloud-platform google-bigquery
BigQuery 不介意您有 3 个表还是 30,000 个表。这应该不会影响查询速度。
但是!想象一下,如果一个 UI 试图列出一个数据集中的所有表,或者其他环境中的类似操作。那肯定会慢一些。
【讨论】: