【问题标题】:HDInsight and Talend Open Studio for Big Data适用于大数据的 HDInsight 和 Talend Open Studio
【发布时间】:2017-03-15 18:40:42
【问题描述】:

我目前正在处理一个项目,我需要将 Talend open Studio for Big Data (v 6.3.1) 连接到 Azure 的 HDInsight (3.5) Hadoop 集群。到目前为止,我正在尝试一个简单的示例,其中包括创建一个 Hive 表。

为此,我使用了下图:

hive 连接配置如下:

...请在下面找到 tHiveCreateTable_1 节点的规格:

通过运行此过程: · 创建了指定的容器和部署 Blob(见下图)——这让我相信 Windows 存储配置一切正常

· 但是 tHiveCreateTable_1 节点有错误(见下图)

· 我坚信这与主机名和端口有关; · 我尝试使用我们可以在 Ambari 中找到的集群的主机名和 Hive 服务器的主机名(见下图)

· 但它们都没有按预期工作。

有人试过类似的吗?

注意:说 Talend 支持的 Azure 版本是 3.4 似乎相当重要,但是,我使用的是 3.5,可能是它。

非常感谢您提前提供的帮助。

【问题讨论】:

  • 一些改进内容的建议。你的截图太模糊了,尤其是关于错误的截图。您能否提供清晰的屏幕截图以帮助我们分析问题?谢谢。

标签: azure hadoop hive talend azure-hdinsight


【解决方案1】:

根据官方docuemnt 关于 Hadoop 组件和 HDInsight 可用版本之间的差异,HDInsight 3.5 基于 Hortonworks Data Platform(HDP) 2.5,但 HDI 3.4 基于 HDP 2.4。但是,它们的 Hive 组件或其他组件没有太大的版本差异。因此,我的建议是,您可以尝试使用与当前 HDI 3.5 相同的 Azure 存储帐户创建 HDI 3.4,而不会对您的需求产生更多影响。

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 2013-10-18
    • 1970-01-01
    • 2021-11-01
    • 1970-01-01
    • 2017-05-31
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多