Hadoop MapReduce程序在Eclipse中运行良好，但在导出为.jar文件时运行不正常

Question

在Eclipse中，我从三个目录添加外部库。 hadoop中的lib目录，hbase中的lib目录以及Eclipse项目中的其他jar文件中的两个本地目录。当执行导出的jar文件时，我得到一个与hbase相关的ClassNotFoundException。我确定这是我的外部库的问题。

我执行程序就是这样：

hadoop jar /home/brunneis/Escritorio/mr.jar Principal -libjars /bigdata/hbase/lib/*.jar,/home/brunneis/workspace/MapReduce/lib/*.jar,/home/brunneis/workspaces/MapReduce/lib1.1.2/*.jar 

在hadoop-env.sh文件我也加入这一行：

export HADOOP_CLASSPATH="/bigdata/hbase/lib/*.jar;/home/brunneis/workspace/MapReduce/lib/*.jar;/home/brunneis/workspace/MapReduce/lib1.1.2/*.jar" 

而这就是我得到：

Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hadoop/hbase/HBaseConfiguration 
at Principal.main(Principal.java:27) 
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) 
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57) 
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43) 
at java.lang.reflect.Method.invoke(Method.java:606) 
at org.apache.hadoop.util.RunJar.main(RunJar.java:160) 
Caused by: java.lang.ClassNotFoundException: org.apache.hadoop.hbase.HBaseConfiguration 
    at java.net.URLClassLoader$1.run(URLClassLoader.java:366) 
    at java.net.URLClassLoader$1.run(URLClassLoader.java:355) 
    at java.security.AccessController.doPrivileged(Native Method) 
    at java.net.URLClassLoader.findClass(URLClassLoader.java:354) 
    at java.lang.ClassLoader.loadClass(ClassLoader.java:425) 
    at java.lang.ClassLoader.loadClass(ClassLoader.java:358) 
... 6 more 

非常感谢。

Answer 1

NoClassDefFoundError出现在运行时不可见的类，但在编译时。这可能与JAR文件有关，因为没有包含所有必需的类文件。关于你的情况下面的帖子可能会帮助你。

HBase - java.lang.NoClassDefFoundError in java

粘贴从上面的链接的答案。

这是Hbase客户端Java程序，您不应该使用“hadoop”运行它。它应该是一个标准的jar程序运行风格，如：java -jar yourjar.jar

当您使用“> jar -cvf TestHBase.jar -C TestHBase /”时，它不保证jar依赖关系可以在运行时发现，你面对它。

在eclipse中，jar导出函数可以选择“Runable”jar。

因此，建议你单独运行你的测试类，明确指出依赖的jar。