【问题标题】:Ignore/Ovewrite .pigbootup configurations忽略/覆盖 .pigbootup 配置
【发布时间】:2015-02-10 08:44:42
【问题描述】:

我配置了一个.pigbootup 文件,该文件为所有猪作业配置SET DEFAULT_PARALLEL。我正在处理的脚本不需要那么多减速器,我不想使用那个配置。如何覆盖/忽略此文件中给出的配置?

【问题讨论】:

  • 您是否尝试过在脚本中使用set default_parallel x 来覆盖该值?
  • 我试过了,但是我在脚本中配置的值不会覆盖那个值。 :-(

标签: hadoop mapreduce apache-pig


【解决方案1】:

我发现这是完全忽略.pigbootup 文件的好方法。但是,如果您想覆盖属性值并仍然使用现有配置,那么我认为这不是一个好主意。但是,我的情况很好。

pig -Dpig.load.default.statements=/tmp/.non-existent-pigboot -f test.pig

参考 - https://hadoopified.wordpress.com/2013/02/06/pig-specify-a-default-script/

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 2016-05-07
    • 2020-03-30
    • 2015-04-25
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多