JDBC访问Hive失败 & beenline连接Hive 和导入文件 时提示anonymous用户权限不够

时间:2024-03-30 16:04:26

前言

    最近项目中有跟hive交互的部分,在测试环境用JDBC方式和beenline方式访问hive server时访问失败,下面来记录下问题的解决过程;

正文

JDBC访问hive server2失败

    程序中关于hive配置信息写在了application.yaml文件中
JDBC访问Hive失败 & beenline连接Hive 和导入文件 时提示anonymous用户权限不够
    用postman测试访问hive 相关接口,响应结果为空!
     因为JDBC的访问基于beenline(它是基于SQLLine CLI的JDBC客户端),所以想要弄清楚缘由还是用beenline 去访问hive server2 ( 远程模式);

beenline 访问hive 和 导入txt文件到hive 中显示权限不足

# 访问hive命令
 ./beeline -u jdbc:hive2://:10000
# 提示信息 
ERROR : Job Submission failed with exception 'org.apache.hadoop.security.AccessControlException
#  用户为anonymous ,没有权限访问!
(Permission denied: user=anonymous, access=WRITE, inode="/user":hdfs:supergroup:drwxr-xr-x
	at org.apache.hadoop.hdfs.server.namenode.DefaultAuthorizationProvider.checkFsPermission(DefaultAuthorizationProvider.java:279)
	at org.apache.hadoop.hdfs.server.namenode.DefaultAuthorizationProvider.check(DefaultAuthorizationProvider.java:260)
	

HDFS方式导入txt文件数据到hive中

JDBC访问Hive失败 & beenline连接Hive 和导入文件 时提示anonymous用户权限不够

问题分析与解决

     通过日志发现是匿名用户访问权限不足的原因,那么解决权限问题就可以啦!

  • 使用jdbc方式连接hive没有提供用户名,hive认为请求者为anonymous 用户;
  • 默认情况下,是不允许远程以匿名用户访问的,如果访问会提示权限不足;
         提升权限
  • JDBC : 在配置文件中写上超级管理员的用户名
#hive 数据仓库配置
hive:
  datasource:
    url: jdbc:hive2://IP:10000
    driver-class-name: org.apache.hive.jdbc.HiveDriver
    type: com.alibaba.druid.pool.DruidDataSource
    # username依据hadoop生态系统而定
    username: hdfs 
    password:
  • beenline: 在连接hive时使用-n 用户名参数指定访问的用户身份
beeline -n hdfs -u jdbc:hive2://IP:10000

总结

     问题越早出现越好,在试错中不断成长,加油!