项目场景:

系统:Ubuntu20.04
Hadoop版本:Hadoop3.3.1
Hive版本:Hive3.1.2


问题描述:

在启动 Hive 时,出现如下输出:

hadoop@fzqs-Laptop:/usr/local/hive/lib$ hive -version
Exception in thread "main" java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument(ZLjava/lang/String;Ljava/lang/Object;)V
	at org.apache.hadoop.conf.Configuration.set(Configuration.java:1357)
	...
	at org.apache.hadoop.util.RunJar.main(RunJar.java:236)

原因分析:

这是因为 hive 内依赖的 guava.jar 和 hadoop 内的版本不一致造成的。


解决方案:

查看 hadoop 安装目录下的 guava.jar 版本:

ls /usr/local/hadoop/share/hadoop/common/lib/guava*

输出如下:

hadoop@fzqs-Laptop:/usr/local/hadoop/share/hadoop/common/lib$ ls /usr/local/hadoop/share/hadoop/common/lib/guava*
/usr/local/hadoop/share/hadoop/common/lib/guava-27.0-jre.jar

接着查看 Hive 下的 guava.jar 版本:

ls /usr/local/hive/lib/guava*

输出如下:

hadoop@fzqs-Laptop:/usr/local/hadoop/share/hadoop/common/lib$ ls /usr/local/hive/lib/guava*
/usr/local/hive/lib/guava-19.0.jar

可以看到 Hadoop 内的 guava.jar 版本是要高于 Hive 内带的的,所以使用 Hadoop 的替代 Hive 的:

sudo rm /usr/local/hive/lib/guava-19.0.jar
sudo cp /usr/local/hadoop/share/hadoop/common/lib/guava-27.0-jre.jar /usr/local/hive/lib

问题解决。

Logo

魔乐社区(Modelers.cn) 是一个中立、公益的人工智能社区,提供人工智能工具、模型、数据的托管、展示与应用协同服务,为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作,由全产业链共同建设、共同运营、共同享有,推动国产AI生态繁荣发展。

更多推荐