【问题标题】:pig hadoop needed for I want to do?猪 hadoop 需要我想做什么?
【发布时间】:2010-11-12 04:50:22
【问题描述】:

我有一个问题要问你,一个澄清......

我开发了一个使用 hadoop map reduce 的程序,它只从数据集(csv 文件)中获取一列,并使用一些函数处理这些数据,所以这个程序已经完成,但真正的问题是 在 Pig 中开发这个程序是个好主意吗?请注意,在文件处理过程中,我不使用 FILTERS COUNTS 或 Pig 的任何内置函数...

如果我说将这个 hadoop map reduce 程序传递给 Pig 没有意义,我是对的吗?因为我所有的函数都需要重写为 Pig 用户定义函数 UDF...

【问题讨论】:

    标签: hadoop apache-pig required


    【解决方案1】:

    在我看来,实际上并不需要用 PigLatin 编写非常小的脚本。当它变得更大时会更有趣,因为 PigLatin 比 java 需要更少的代码行,而且它更易读,尤其是对于非 java 开发者:)

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 2013-07-22
      • 2019-04-26
      • 1970-01-01
      • 2011-05-14
      • 2014-11-20
      • 1970-01-01
      • 1970-01-01
      • 2013-07-05
      相关资源
      最近更新 更多