我已经从Hortonworks升级到最近的Hadoop：
Hadoop 2.4.0.2.1.2.1-471
Subversion git@github.com:hortonworks/hadoop.git -r 9e5db004df1a751e93aa89b42956c5325f3a4482
Compiled by jenkins on 2014-05-27T18:57Z
Compiled with protoc 2.5.0
From source with checksum 9e788148daa5dd7934eb468e57e037b5
This command was run using /usr/lib/hadoop/hadoop-common-2.4.0.2.1.2.1-471.jar
在升级之前，我写了一个Java MRD程序，它使用Hive表进行输入和输出 . 在以前的Hadoop版本中，它工作正常，尽管我在编译时获得了此代码的弃用警告：
Job job = new Job(conf, "Foo");
HCatInputFormat.setInput(job,InputJobInfo.create(dbName, inputTableName, null));
现在，在更新Hadoop 2.4.0.2.1.2.1-471中的新jar的依赖项并运行相同的代码后，我收到以下错误：
Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/hcatalog/mapreduce/InputJobInfo
at com.bigdata.hadoop.Foo.run(Foo.java:240)
at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:70)
at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:84)
at com.bigdata.hadoop.Foo.main(Foo.java:272)
at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)
at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:57)
at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)
at java.lang.reflect.Method.invoke(Method.java:606)
at org.apache.hadoop.util.RunJar.main(RunJar.java:212)
Caused by: java.lang.ClassNotFoundException: org.apache.hcatalog.mapreduce.InputJobInfo
at java.net.URLClassLoader$1.run(URLClassLoader.java:366)
at java.net.URLClassLoader$1.run(URLClassLoader.java:355)
at java.security.AccessController.doPrivileged(Native Method)
at java.net.URLClassLoader.findClass(URLClassLoader.java:354)
at java.lang.ClassLoader.loadClass(ClassLoader.java:425)
at java.lang.ClassLoader.loadClass(ClassLoader.java:358)
... 9 more
要运行我的代码，我使用以下设置：
export LIBJARS = / usr / lib / hive -hcatalog / share / hcatalog / hive -hcatalog-core.jar，/ usr / lib / hive / lib / hive-exec.jar，/ usr / lib / hive / lib / hive- metastore.jar，/ usr / lib中/蜂巢/ LIB / libfb303-0.9.0.jar，/ usr / lib中/蜂巢/ LIB / JDO-API-3.0.1.jar，/ usr / lib中/蜂巢/ LIB / ANTLR -runtime-3.4.jar，/ usr / lib中/蜂巢/ LIB / DataNucleus将-API-JDO-3.2.6.jar，/ usr / lib中/蜂巢/ LIB / DataNucleus将核 - 3.2.10.jar
export HADOOP_CLASSPATH = / usr / lib / hive -hcatalog / share / hcatalog / hive -hcatalog-core.jar，/ usr / lib / hive / lib / hive-exec.jar，/ usr / lib / hive / lib / hive- metastore.jar，/ usr / lib中/蜂巢/ LIB / libfb303-0.9.0.jar，/ usr / lib中/蜂巢/ LIB / JDO-API-3.0.1.jar，/ usr / lib中/蜂巢/ LIB / ANTLR -runtime-3.4.jar，/ usr / lib中/蜂巢/ LIB / DataNucleus将-API-JDO-3.2.6.jar，/ usr / lib中/蜂巢/ LIB / DataNucleus将核 - 3.2.10.jar
Any ideas why I get java.lang.NoClassDefFoundError: org/apache/hcatalog/mapreduce/InputJobInfo ?
2 回答
我认为你应该在pom.xml中添加以下依赖项 .
我确实遇到了完全相同的问题 . 在您的情况下，您将需要以下 jar 到您的类路径：