【问题标题】:standard on hadoop codinghadoop 编码标准
【发布时间】:2016-02-17 13:28:16
【问题描述】:

我能否获得任何解释不同 hadoop 应用程序标准的文档的参考,例如 HIVE、HBase、PiG、sqoop、Oozie。标准我的意思是,在编码等过程中应该遵循标准/最佳实践。

例如我知道一个标准,在 Hadoop 中,我们不应该使用大量小文件,而应该使用少量大文件(意味着避免在 HIVE 表中进行不必要的分区)。

我正在寻找其他类似领域的标准。

【问题讨论】:

  • 您列出的每一种技术都有不同的代码来执行您想要的操作...没有标准。最佳做法是保持简单

标签: hadoop hive hbase apache-pig


【解决方案1】:

如果您的意思是“编码风格”和一般编码实践,当您将东西包含在内部 Hadoop 中时,那么https://wiki.apache.org/hadoop/CodeReviewChecklist 在谷歌搜索“hadoop 编码风格”时会弹出第一件事。 p>

如果你的意思是别的,那么这个问题显然太宽泛了,无法在这里回答。

【讨论】:

  • 我知道一个标准,在 Hadoop 中我们不应该使用大量小文件,而应该使用少量大文件(意味着避免在 HIVE 表中进行不必要的分区)。我正在寻找像这样的其他领域的标准。
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2013-01-15
  • 2010-10-03
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多