如何用python在远程服务器上写入4K大小的文件

Question

我正在尝试在安装了 S3 的 EC2 实例上写入 50 个 4KB 文件。

如何在 python 中做到这一点？

我不知道该怎么做。

Answer 1

如果您通过 FUSE 或其他一些方法挂载 S3 对象存储区以获取 S3 对象空间作为伪文件系统，那么您编写文件就像在 Python 中编写其他任何东西一样。

with open('/path/to/s3/mount', 'wb') as dafile:
    dafile.write('contents')

如果您尝试将对象从 EC2 实例放入 S3，那么您需要遵循 boto 文档了解如何执行此操作。

让你开始：

create a /etc/boto.cfg or ~/.boto file like the boto howto says

from boto.s3.connection import S3Connection

conn = S3Connection()
# if you want, you can conn = S3Connection('key_id_here, 'secret_here')
bucket = conn.get_bucket('your_bucket_to_store_files')
for file in fifty_file_names:
    bucket.new_key(file).set_contents_from_file('/local/path/to/{}'.format(file))

这假设您正在处理相当小的文件，例如您所说的 50k。较大的文件可能需要拆分/分块。