如何使用 Python 以 JSON 文件格式将 HTTP API 上传到 AWS S3 存储桶？

Question

我可以将我的 HTTP API 上传到 S3 存储桶，但没有为其分配任何文件格式。如何将其作为 JSON 文件上传？

import json
import requests
import boto3

s3 = boto3.client('s3', aws_access_key_id='***', aws_secret_access_key='***')

covid_text = requests.get('https://disease.sh/v3/covid-19/continents')

data = covid_text.json()

s3.put_object(Body=json.dumps(data), Bucket='my_bucket', Key='httpsGETdisease.sh/v3/covid-19/continents')

Answer 1

这是我在内部使用的用于将文件（通常是 JSON）上传到 S3 的代码的 sn-p。 self.client 是一个缓存属性，相当于上面代码中的boto3.client('s3')；只有我为了可重用性而缓存了它，因为它在向同一个存储桶发出多个请求时会更快一些，比如读取上传的文件然后重新上传。

    def upload(self, file_name, bucket, key=None, content_type='application/json'):
        """upload a file (usually a JSON file) to S3"""
        self.client.upload_file(
            file_name, bucket, key or file_name, {'ContentType': content_type})

当我从 S3 下载文件（通常是 JSON 文件）时，类似的代码 sn-p。这里我们只检查对象的内容类型，如果是 JSON，我们加载它并将数据作为 Python list 或 dict 类型返回。否则，我们只是将对象数据作为明文返回。

        content_type = res.get('ContentType', 'application/json')

        data = res['Body'].read().decode(encoding)
        if content_type.endswith('json'):
            return json.loads(data)

        return data