【发布时间】:2017-08-18 12:54:55
【问题描述】:
在 Hadoop 上:我想运行一个 jar,它有许多存储在 hdfs 中的依赖项(jar)(我不想将它们放在本地文件系统中)。
我该怎么做?
【问题讨论】:
标签: java hadoop jar dependencies classpath
在 Hadoop 上:我想运行一个 jar,它有许多存储在 hdfs 中的依赖项(jar)(我不想将它们放在本地文件系统中)。
我该怎么做?
【问题讨论】:
标签: java hadoop jar dependencies classpath
您可以将它们放在客户端的类路径中 (边缘)节点,即运行代码的机器(主 jar)
更新:您可以探索 -libjars 选项。
您也可以查看这个非常好的博客。 http://grepalex.com/2013/02/25/hadoop-libjars/
【讨论】: