【问题标题】:Download NCDC weather dataset from s3 to local machine using S3cmd使用 S3cmd 将 NCDC 天气数据集从 s3 下载到本地计算机
【发布时间】:2014-11-27 21:21:55
【问题描述】:

我想在亚马逊公共数据集上下载公开可用的 NCDC 天气数据集。但我找不到它。谁能告诉我它所在的确切存储桶?能否请您告诉我如何使用 s3cmd 将其下载到我的本地计算机上?

任何帮助将不胜感激。

http://aws.amazon.com/datasets/2759 是我正在寻找的特定数据集的链接。

【问题讨论】:

    标签: amazon-s3 dataset amazon public s3cmd


    【解决方案1】:

    您引用的数据集以 EBS 快照 的形式提供,而不是 S3 存储桶。您需要将快照转换为新的 EBS 卷,该卷可以安装在 Amazon EC2 实例上。

    访问它:

    • 访问 Amazon EC2 管理控制台
    • 将区域设置为美国东部
    • 在搜索栏中,选择“公共快照”
    • 在搜索过滤器(来自您引用的页面)中输入快照 ID,然后按 Enter。您现在应该会看到一个快照。
    • 可选:根据需要将快照“复制”到另一个区域
    • “创建卷”从快照创建 EBS 卷(确保选择与您的 EC2 实例相同的可用区)
    • 转到左侧导航窗格中的“卷”
    • 将新的 EBS 卷“附加”到现有的 EC2 实例上

    然后您将可以访问数据。

    请注意,数据集来自 2009 年。它不包含最近的数据。

    【讨论】:

    • 没有办法将数据传输到我的本地机器上吗?
    • 数据将在 EC2 实例上可用。然后,您可以通过scp 或您喜欢的任何方法将其复制到您的本地计算机。
    猜你喜欢
    • 2019-07-03
    • 1970-01-01
    • 2011-09-21
    • 1970-01-01
    • 1970-01-01
    • 2017-08-30
    • 2020-04-09
    • 1970-01-01
    • 2019-09-20
    相关资源
    最近更新 更多