【问题标题】:100 GiB Files upload to AWS Ec2 Instance100 GiB 文件上传到 AWS Ec2 实例
【发布时间】:2017-03-01 13:11:21
【问题描述】:

我们有 n 个文件,总大小约为 100 GiB。我们需要将所有文件上传到托管在 AWS(美国地区)的 EC2 Linux 实例。 我的办公室(在印度)互联网连接是 4Mbps 专用租用线路。将 500 MB 文件上传到 EC2 实例需要超过 45 分钟。这太慢了。

我们如何在最短的时间内传输这种批量上传..? 如果是 100 TB,我们可以使用滚雪球导入和导出,但这是 100 GiB。

【问题讨论】:

    标签: amazon-web-services data-transfer awss3transfermanager


    【解决方案1】:

    它应该比您体验的快 3 倍。

    如果有很多小文件,您可以尝试“压缩”它们以发送更少的大文件。

    并确保您不会通过加密数据 (ssh/sftp) 来限制 linux 服务器。 Ftp 可能是您最快的方式。

    但是 100GB 总是需要至少 57 小时才能达到最高速度..

    【讨论】:

    • Aslund,感谢您的建议。
    猜你喜欢
    • 2015-11-19
    • 2020-09-17
    • 2016-02-12
    • 1970-01-01
    • 2014-06-04
    • 1970-01-01
    • 2013-10-24
    • 2016-03-11
    • 2012-03-01
    相关资源
    最近更新 更多