BigQuery：Tabledata 的成本：包含“startIndex”和“maxResults”的列表

Question

我想分别从大约 100 亿条记录中获取记录。虽然我尝试过“select...limit x offset y”，但它太贵了。我收到了令人惊讶的账单并感到震惊。

现在我正在考虑将“Tabledata: list”与“startIndex”和“maxResults”一起使用。但我不确定成本是否比“select ...limit x offset y”便宜得多。 “maxResults”会影响成本吗？

Answer 1

bigquery.tabledata.list()是免费操作，但是提取100亿条记录会太慢。

改为使用extract job 导出到 GCS（这也是 BigQuery 中的免费操作）：

• https://cloud.google.com/bigquery/docs/exporting-data