MapReduce中使用Avro出现TaskAttemptContext异常

2023-11-06

打包上传Jar包到Hadoop环境下运行时,出现异常:

Found interface org.apache.hadoop.mapreduce.TaskAttemptContext, but class was expected

在网上找了很多的解决办法,都没有解决相应的问题。最后解决方案如下:

解决办法:

生成jar包时,主类选择对应的java文件

需要把依赖jar包 avro-mapred-**.jar 上传到 $HADOOP_HOME/share/hadoop/mapreduce目录下,并且一定上传分类器版本对应haddop的jar。

如:我使用的是:avro-mapred-1.11.0.jar,将对应jar上传到对应目录

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

MapReduce中使用Avro出现TaskAttemptContext异常 的相关文章

随机推荐