如何从 Google App Engine 上的 URL 将文件存储在 Google Storage 上？

Question

我想在 Google App Engine (Python) 上创建一个服务，该服务将接收图像的 URL 并将其存储在 Google 存储中。我设法使用boto 或gsutil 命令行从本地文件上传，但不是通过URL 检索文件。我尝试使用HTTP requests (PUT) 进行操作，但我收到了错误签名的错误响应。显然我做错了什么，但不幸的是我不知道在哪里。

所以我的问题是：如何使用 Python for Google App Angine 从 URL 检索文件并将其存储在 Google Storage 中？

这是我所做的（使用另一个answer）：

class ImportPhoto(webapp.RequestHandler):
    def get(self):
        self.response.headers['Content-Type'] = 'text/plain'
        srow = self.response.out.write
        url = self.request.get('url')
        srow('URL: %s\n' % (url))
        image_response = urlfetch.fetch(url)
        m = md5.md5()
        m.update(image_response.content)
        hash = m.hexdigest()
        time = "%s" % datetime.utcnow().strftime("%a, %d %b %Y %H:%M:%S GMT")
        str_to_sig = "PUT\n" + hash + "\n\n" + 
                      time + "\nx-goog-acl:public-read\n/lipis/8418.png"
        sig = base64.b64encode(hmac.new(
                                  config_credentials.GS_SECRET_ACCESS_KEY,
                                  str_to_sig, hashlib.sha1).digest())
        total = len(image_response.content) 
        srow('Size: %d bytes\n' % (total))

        header = {"Date": time,
                  "x-goog-acl": "public-read",
                  "Content-MD5": hash,
                  'Content-Length': total,
                  'Authorization': "GOOG1 %s:%s" % 
                                    (config_credentials.GS_ACCESS_KEY_ID, sig)}

        conn = httplib.HTTPConnection("lipis.commondatastorage.googleapis.com")
        conn.set_debuglevel(2)

        conn.putrequest('PUT', "/8418.png")
        for h in header:
            conn.putheader(h, header[h])
        conn.endheaders()
        conn.send(image_response.content + '\r\n')
        res = conn.getresponse()

        srow('\n\n%d: %s\n' % (res.status, res.reason))
        data = res.read()
        srow(data)
        conn.close()

我得到了回应：

URL: https://stackoverflow.com/users/flair/8418.png
Size: 9605 bytes

400: Bad Request
<?xml version='1.0' encoding='UTF-8'?><Error><Code>BadDigest</Code><Message>The Content-MD5 you specified did not match what we received.</Message><Details>lipis/hello.jpg</Details></Error>

Answer 1

您是否阅读过how to sign requests 上的文档？除了自定义标头和资源路径之外，要签名的字符串还必须包含 Content-MD5、Content-Type 和 Date 标头。

Answer 2

Content-MD5 标头对于 PUT requests 是可选的。尝试将其保留以进行测试。

此外，必需的标头是 Authorization、Date 和 Host。您的请求似乎缺少Host 标头。