[大数据]hive异常汇总

在使用hive的hiveserver2模式的时候，遇到一些问题，在这里进行汇总一下

使用组件版本如下

hadoop（3.1.3） ha集群

zookeeper（3.5.7）

mysql 5.7.28

hive（3.1.2）

在搭建好hive以后，服务端启动 (前提是配置文件已经配置，需要配置文件的欢迎留言索取)

hive --service metastore

hive --service hiveserver2（等待一段时间，等待时长与服务器性能有关，可以查看日志）

在新窗口建立与服务端的连接，执行，此处的hive为使用用户，表示是哪个用户想yarn提交的任务

bin/beeline -u jdbc:hive2://hadoop102:10000 -n hive

然后显示链接不上，日志如下

org.apache.hadoop.security.authorize.AuthorizationException: User: xxx is not allowed to impersonate xxx, while invoking ApplicationClientProtocolPBClientImpl.getNewApplication over null after 1 failover attempts. Trying to failover after sleeping for 21050ms.

遇到这种情况一般是看一下hadoop的配置文件core-site.xml文件是否有如下配置

<!-- 配置该atguigu(superUser)允许通过代理用户所属组 -->
?<property>
? ? ? ? <name>hadoop.proxyuser.用户.groups</name>
? ? ? ? <value>*</value>
</property>
<!-- 配置该atguigu(superUser)允许通过代理的用户-->
?<property>
? ? ? ? <name>hadoop.proxyuser.用户.groups</name>
? ? ? ? <value>*</value>
</property>

如果没有，添加上以后同步到集群重启dfs服务

如果配置以后还是出现以上问题，检查配置的集群配置文件是否同步到集群，重启服务，hive只能访问节点为active的hdfs节点

如果连接成功以后，提交任务一直不成功，可能是内存不够，需要设置hive-env.xml的

export HADOOP_HEAPSIZE=1024? ? ? ? # 将这行注释打开，重启hive服务

如果还没有解决，欢迎留言交流。