MAPREDUCE任务

  Mr任务依然可以使用command的job类型来执行

  1、创建job描述文件,及mr程序jar包(示例中直接使用hadoop自带的example jar)

# mrwc.job
type=command
command=/usr/local/src/hadoop-2.6.4/bin/hadoop  jar hadoop-mapreduce-examples-2.6.1.jar wordcount /wordcount/input /wordcount/azout

  2、将所有job资源文件打到一个zip包中

   11_Azkaban案例实践4_Command操作MapReduce

  3、在azkaban的web管理界面创建工程并上传zip包

  4、启动job,http://shizhan2:50070运行成功

  11_Azkaban案例实践4_Command操作MapReduce

 

相关文章:

  • 2021-10-14
  • 2021-11-09
  • 2022-12-23
  • 2022-12-23
  • 2021-10-16
  • 2022-12-23
  • 2022-12-23
猜你喜欢
  • 2019-11-11
  • 2021-09-21
  • 2022-12-23
  • 2021-09-07
  • 2022-12-23
  • 2021-06-16
  • 2021-09-22
相关资源
相似解决方案