【发布时间】:2019-03-12 18:16:17
【问题描述】:
HDFS 块大小默认为 128 MB(来源:https://hadoop.apache.org/docs/r2.9.0/hadoop-project-dist/hadoop-hdfs/hdfs-default.xml)
Hive 条带大小默认为 250 MB(来源:https://cwiki.apache.org/confluence/display/Hive/LanguageManual+ORC#LanguageManualORC-FileStructure)
据我了解,1 个条带必须完全适合 HDFS 的 1 个块。
我在这里遗漏了什么吗?我有不正确的信息吗?
您是否只需将 HDFS 配置为具有 250 MB 块以适应条带?
【问题讨论】: