【问题标题】:Error while running MRJOB on AWS在 AWS 上运行 MRJOB 时出错
【发布时间】:2017-09-20 19:56:00
【问题描述】:

我将 mrjob.conf 文件放在 /home 目录中并尝试从命令运行作业,但出现此错误:

文件“/Users/bimalthapa/anaconda/lib/python2.7/site-packages/mrjob-0.4.6-py2.7.egg/mrjob/conf.py”,第 283 行,在 conf_object_at_path 使用 open(conf_path) 作为 f: IOError: [Errno 2] 没有这样的文件或目录:'mrjob.conf'

这是我的命令:

python mr_statistics.py -c ~/mrjob.conf -r emr s3://bimalucmbucket/inputFile.txt --output-dir=s3://bimalucmbucket/output --no-output

放置mrjob.conf和正确命令的正确方法是什么?

【问题讨论】:

    标签: python amazon-web-services mrjob bigdata


    【解决方案1】:

    python mr_statistics.py -r emr s3://bimalucmbucket/inputFile.txt --output-dir=s3://bimalucmbucket/output --no-output -c ~/mrjob.conf

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2016-02-27
      • 2020-12-11
      • 1970-01-01
      • 2017-07-12
      相关资源
      最近更新 更多