【问题标题】:Installing Spark/Zeppelin on Standalone node在独立节点上安装 Spark/Zeppelin
【发布时间】:2018-10-17 20:10:38
【问题描述】:

我有一个由管理员团队管理的 Cloudera 集群。但是集群中没有安装 Zeppelin。

我想在单独的节点上安装 Zeppelin 并连接到 Cloudera 集群?

在不属于集群的节点上安装zeppelin并向其提交spark作业是否可行?

任何参考都非常感谢?

谢谢

【问题讨论】:

  • 是的,这是可能的。请记住,您应该在解释器设置中正确设置 Yarn(Spark Master)地址和其他设置。

标签: apache-spark apache-zeppelin


【解决方案1】:

Zeppelin 只是另一个 Spark 客户端。

例如,在您要使用 Zeppelin 的机器上,您应该首先确保 spark shell 和 spark 提交按预期工作,然后 Zeppelin 配置变得容易得多

一种简单的管理方法是让管理员使用 Cloudera Manager 将 Spark(以及 Hive 和 Hadoop)客户端库安装到这个独立节点中,然后我假设他们为您提供 SSH 访问权限,或者您告诉他们如何安装它

【讨论】:

    猜你喜欢
    • 2015-07-18
    • 2018-05-30
    • 2015-08-29
    • 2016-03-17
    • 1970-01-01
    • 1970-01-01
    • 2016-02-10
    • 2017-11-02
    • 2017-03-22
    相关资源
    最近更新 更多