【发布时间】:2015-08-24 09:46:16
【问题描述】:
已解决:正如 Felipe 在 cmets 中建议的那样,我使用欧盟作为数据位置。 BigQuery 在欧盟数据中心无法使用流式传输,因此我不得不将数据迁移到美国数据中心,之后一切都按预期工作。
我的问题: 我正在尝试使用 Google App Engine(python 版本)将数据推送到 BigQuery。在实际插入发生之前,一切似乎都很好,之后我收到了 HTTP 501 错误。 Google 的错误代码表将我引向“联系支持”。
错误响应:
HttpError:https://www.googleapis.com/bigquery/v2/projects/[PROJECT]/datasets/[DATASET]/tables/[TABLE]/insertAll?alt=json 返回“未实现:流式摄取已禁用目标数据集。">
使用的实际代码:
class MainHandler(webapp2.RequestHandler):
def get(self):
data = json.loads(self.request.get('data'))
body = {
'insertId': str(uuid4()),
'rows':[
{'json': data}
]
}
credentials = appengine.AppAssertionCredentials(scope=_SCOPE)
http = credentials.authorize(httplib2.Http())
bigquery = discovery.build('bigquery', 'v2', http=http)
response = bigquery.tabledata().insertAll(
projectId=PROJECT_ID,
datasetId=DATASET_ID,
tableId=TABLE_ID,
body=body).execute(num_retries=num_retries)
【问题讨论】:
-
Google 的错误代码表将我指向“联系支持” 并且..您联系过支持吗?
-
我目前无法获得 Google 的支持,因为我没有支持包。因此,我在这里问这个问题,看看是否有其他人熟悉这个问题。
-
然后在我的回答中发布链接。
-
我的猜测:这个数据集是否托管在欧洲?欧洲集群目前不支持流式传输。
-
感谢 Felipe,这解决了我的问题。如果您愿意在评论中写下作为答案,我会接受。
标签: python google-app-engine google-bigquery