1. 作业配置

mapred.job.name

作业名

mapred.job.priority

作业优先级

mapred.job.map.capacity

最多同时运行map任务数

mapred.job.reduce.capacity

最多同时运行reduce任务数

hadoop.job.ugi

作业执行权限

mapred.map.tasks

map任务个数

mapred.reduce.tasks

reduce任务个数

mapred.job.groups

作业可运行的计算节点分组

mapred.task.timeout

任务没有响应(输入输出)的最大时间

mapred.compress.map.output

map的输出是否压缩

mapred.map.output.compression.codec

map的输出压缩方式

mapred.output.compress

reduce的输出是否压缩

mapred.output.compression.codec

reduce的输出压缩方式

stream.map.output.field.separator

map输出分隔符

相关文章:

  • 2022-01-24
  • 2021-05-19
  • 2022-12-23
  • 2021-11-20
  • 2021-06-06
  • 2021-05-14
  • 2021-07-13
猜你喜欢
  • 2021-10-14
  • 2022-02-08
  • 2022-12-23
  • 2022-12-23
  • 2021-11-19
  • 2021-07-15
相关资源
相似解决方案