【问题标题】:Add Archive to distributed cache pigServer in local mode在本地模式下将存档添加到分布式缓存 pigServer
【发布时间】:2015-10-20 13:09:44
【问题描述】:

我正在尝试将存档文件添加到 pig 中的分布式缓存中,同时使用 pigServer 在本地模式下运行它。

DistributedCache.addArchiveToClassPath(new Path(new URI("path to archivefile#symlink")),conf);

这似乎不起作用。

如何在本地模式下使用 pigServer 运行它时添加存档文件并向 pig 添加符号链接?

【问题讨论】:

    标签: java hadoop apache-pig hadoop2


    【解决方案1】:

    在本地模式下运行作业时,不支持分布式缓存。

    如果你仔细查看你的日志,它会给你如下警告。

    2015-10-05 23:22:56,675 [main] INFO  org.apache.pig.data.SchemaTupleFrontend - Distributed cache not supported or needed in local mode.
    

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 2018-11-23
      • 1970-01-01
      • 2015-03-12
      • 2020-12-14
      • 2013-05-23
      • 2012-03-15
      • 2011-03-11
      相关资源
      最近更新 更多