【问题标题】:java.lang.NoClassDefFoundError: org/apache/accumulo/core/client/Instancejava.lang.NoClassDefFoundError: org/apache/accumulo/core/client/Instance
【发布时间】:2015-03-24 19:37:49
【问题描述】:

我正在使用小程序将数据写入Accumulo。

手动添加 jar 时程序正常工作。但是,当使用 maven 构建时,使用手册中使用的相同版本会抛出:

java.lang.NoClassDefFoundError: org/apache/accumulo/core/client/Instance.

我该如何解决?

【问题讨论】:

  • 需要更多信息,发布你的代码和 pom.xml

标签: hadoop noclassdeffounderror accumulo


【解决方案1】:

您的作业将在 MR 网络中的所有节点上运行。您需要在所有节点上安装适当的 jar 才能使其正常工作。

您已经注意到,另一种方法是将所有内容都包含在一个 uber jar 中,其中包含您需要的所有内容。这样,当您的工作被运送到每个节点时,您将拥有所需的一切。使用 maven 实现此目的的一种方法是使用插件:

<build>
    <plugins>
        <plugin>
            <artifactId>maven-assembly-plugin</artifactId>
            <version>2.2.1</version>
            <configuration>
                <descriptors>
                    <descriptor>src/main/assembly/hadoop-job.xml</descriptor>
                </descriptors>
            </configuration>
            <executions>
                <execution>
                    <id>make-assembly</id>
                    <phase>package</phase>
                    <goals>
                        <goal>single</goal>
                    </goals>
                </execution>
            </executions>
        </plugin>
    </plugins>
</build>

在你的 hadoop-job.xml 里面你可能有

<assembly>
  <id>job</id>
  <formats>
   <format>jar</format>
  </formats>
  <includeBaseDirectory>false</includeBaseDirectory>
  <dependencySets>
    <dependencySet>
      <unpack>false</unpack>
      <scope>runtime</scope>
      <outputDirectory>lib</outputDirectory>
      <excludes>
        <exclude>${groupId}:${artifactId}</exclude>
      </excludes>
    </dependencySet>
    <dependencySet>
      <outputDirectory></outputDirectory>
      <unpack>true</unpack>
      <includes>
        <include>${groupId}:${artifactId}</include>
      </includes>
    </dependencySet>
  </dependencySets>
</assembly>

更多关于这个插件的信息可以在http://maven.apache.org/plugins/maven-assembly-plugin/找到

【讨论】:

【解决方案2】:

您必须下载 accumulo-core.jar 并将其添加到您的类路径中。

【讨论】:

  • @srikanth 你如何运行你的程序并显示你的文件结构。你用的是哪个版本的accumulo
  • 我正在使用 mapreduce 来完成插入工作。 Driver.java、Mapper.java、Connector.java(单例)。我使用 accumulo-1.5.1。我使用'hadoop jar name.jar package.classname args1 args2'运行。异常在 Mapper 中引发,在我发起单例 Connector.java 调用的线上
猜你喜欢
  • 1970-01-01
  • 2015-11-13
  • 1970-01-01
  • 2015-01-29
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多