【问题标题】:Making pig embedded with python script and pig cassandra integration to work with oozie使 pig 嵌入 python 脚本和 pig cassandra 集成以与 oozie 一起使用
【发布时间】:2013-11-17 20:51:42
【问题描述】:

我是 oozie 的新手,我遇到的问题很少。 1)我试图在 oozie 中嵌入一个猪动作,它有一个 python 脚本导入。我已将 jython.jar 文件放在 lib 路径中,并在 pig 脚本中进行了导入,该脚本将采用 python UDF。我似乎没有得到这个工作。 .py 文件没有被拾取。如何解决这个问题? 2)我有一个猪 cassandra 集成,其中我使用 cql 使用猪从 cassandra 获取数据并进行一些基本转换。在 CLI 中,我可以让它工作。但在 oozie 方面,我不是。我似乎没有在 oozie 中找到解决方案(配置和其他)来执行此操作。谁能帮我解决这个问题?提前致谢。

【问题讨论】:

    标签: python hadoop cassandra apache-pig oozie


    【解决方案1】:

    解决了。解决方案..

    1) 将 python 文件放在 oozie worklow 路径中,然后从这里引用 if。

    2) oozie 的 HDFS 路径下的 lib 文件夹中添加了 cassandra jar 文件。

    【讨论】:

      猜你喜欢
      • 2013-04-11
      • 1970-01-01
      • 1970-01-01
      • 2017-05-02
      • 2012-11-27
      • 1970-01-01
      • 1970-01-01
      • 2011-04-17
      • 1970-01-01
      相关资源
      最近更新 更多