Hadoop MRUnit异常与Hadoop2

Question

我试图使用Hadoop2对MRUnit进行测试，但得到了以下错误：

java.lang.IncompatibleClassChangeError: Found class org.apache.hadoop.mapreduce.TaskInputOutputContext, but interface was expected

我看到了关于堆栈溢出的其他几个答案，但大多数答案似乎都与在pom.xml文件中为Hadoop1和Hadoop2包含多个配置有关。

有谁能洞察到是什么原因造成了这一切？

我的pom.xml文件如下：

 <dependencies>
<dependency>
  <groupId>junit</groupId>
  <artifactId>junit</artifactId>
  <scope>test</scope>
</dependency>
<dependency>
    <groupId>com.github.davidmoten</groupId>
    <artifactId>geo</artifactId>
    <version>0.6.5</version>
</dependency>
<dependency>
    <groupId>javax.xml.bind</groupId>
    <artifactId>activation</artifactId>
    <version>1.0.2</version>
</dependency>
<dependency>
    <groupId>javax.xml.bind</groupId>
    <artifactId>jaxb-api</artifactId>
    <version>2.2.11</version>
</dependency>
<dependency>
    <groupId>org.apache.hadoop</groupId>
    <artifactId>hadoop-core</artifactId>
    </dependency>   
<dependency>
    <groupId>org.apache.mrunit</groupId>
    <artifactId>mrunit</artifactId>
    <version>1.0.0</version>
    <classifier>hadoop2</classifier>
    <scope>test</scope>
</dependency>   

​

Answer 1

这意味着您实际上并不是在Hadoop 2上运行。TaskInputOutputContext是一个接口为2.x，但它说它认为它是一个类。

事实上，您的pom.xml证实了这一点。hadoop-core是一个1.x工件。您将在2.x中使用类似于hadoop-common的东西。