【发布时间】:2016-08-11 20:12:15
【问题描述】:
我正在研究从Redshift 数据库转储文件的过程,并且不希望必须在本地下载文件来处理数据。我看到 Java 有一个 StreamingObject 类可以满足我的要求,但我在 boto3 中没有看到类似的东西。
【问题讨论】:
我正在研究从Redshift 数据库转储文件的过程,并且不希望必须在本地下载文件来处理数据。我看到 Java 有一个 StreamingObject 类可以满足我的要求,但我在 boto3 中没有看到类似的东西。
【问题讨论】:
如果您有一个 mybucket S3 存储桶,其中包含一个 beer 密钥,以下是如何下载和获取该值而不将其存储在本地文件中:
import boto3
s3 = boto3.resource('s3')
print s3.Object('mybucket', 'beer').get()['Body'].read()
【讨论】:
s3 = boto3.client('s3') print(s3.get_object(Bucket='mybucket', Key='beer')['Body'].read())
这可能与您想要做的事情相关,也可能不相关,但就我的情况而言,使用 tempfile 是一件很有效的事情:
import tempfile
import boto3
bucket_name = '[BUCKET_NAME]'
key_name = '[OBJECT_KEY_NAME]'
s3 = boto3.resource('s3')
temp = tempfile.NamedTemporaryFile()
s3.Bucket(bucket_name).download_file(key_name, temp.name)
# do what you will with your file...
temp.close()
【讨论】: