【问题标题】:Is there a limit of MAX number of rows when uploading a CSV to Big Query?将 CSV 上传到 Big Query 时是否有最大行数限制?
【发布时间】:2014-02-05 17:28:33
【问题描述】:

我有一位同事尝试使用网络界面将 CSV 文件上传到 Big Query。文件大小小于 100KB,有 1352 行。似乎只有前 1000 行被上传到 Big Query。

我没有在此页面上看到任何类型的行限制 - https://developers.google.com/bigquery/preparing-data-for-bigquery。 1000 行真的是上传 CSV 的限制吗?上传到 Big Query 时,相同的限制是否适用于 gsutil?有没有办法为每个项目配置该限制?

【问题讨论】:

    标签: csv google-bigquery


    【解决方案1】:

    我刚刚收到同事的回复,似乎是用户错误。他查询了刚刚上传的列表,查询的SQL文本末尾默认有“LIMIT 1000”。当他删除 LIMIT 时,他能够确认所有内容都已上传。

    【讨论】:

      【解决方案2】:

      很高兴您设法解决了问题。

      作为参考,网络界面最多允许上传 10 MB。 API 级别的限制见https://developers.google.com/bigquery/quota-policy

      【讨论】:

        猜你喜欢
        • 2017-09-20
        • 2023-01-21
        • 2020-10-20
        • 1970-01-01
        • 2017-04-25
        • 2023-03-03
        • 1970-01-01
        • 1970-01-01
        • 1970-01-01
        相关资源
        最近更新 更多