【问题标题】:Create sample Azure Hadoop job via Web UI or cross-platform CLI?通过 Web UI 或跨平台 CLI 创建示例 Azure Hadoop 作业?
【发布时间】:2013-11-12 14:15:26
【问题描述】:

我正在尝试使用 HDInsight 在 Azure 上使用 Hadoop,但对于如何在我新创建的集群上运行 Hadoop 作业有点困惑。到目前为止,我已经创建了一个 HDInsight 群集并将一个存储帐户附加到它。我还在本地 OS X 机器上安装了 azure-cli。

有一个 Azure tutorial on launching Hadoop jobs,但它使用 PowerShell,我认为不能通过 Azure cross-platform CLI 获得。

除了启动 Windows VirtualBox 之外,是否可以通过 Azure Web UI(例如,像 Amazon EMR 提供的那样)或通过与 OS X 兼容的其他命令行参数来创建作业?

谢谢

【问题讨论】:

    标签: azure hadoop azure-hdinsight


    【解决方案1】:
    1. 使用远程桌面协议登录到集群的头节点并在那里使用 CLI 工具。
    2. 或使用 WebHCatalog REST APIs 提交作业(例如使用 curl)。

    HDInsight 当前拥有XPlat CLI tools for cluster provisioning。稍后将提供作业提交 XPlat CLI 工具。

    【讨论】:

    • 谢谢。不知道 WebHCatalog 是只针对 Hive 的,还是可以提交标准的 Jar 作业?
    • 您提供的第一个链接(WebHCatalog REST API)已损坏。
    猜你喜欢
    • 2020-07-03
    • 2014-03-19
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2014-12-23
    • 1970-01-01
    • 2021-08-31
    相关资源
    最近更新 更多