前言
最近项目中有跟hive交互的部分,在测试环境用JDBC方式和beenline方式访问hive server时访问失败,下面来记录下问题的解决过程;
正文
JDBC访问hive server2失败
程序中关于hive配置信息写在了application.yaml文件中
用postman测试访问hive 相关接口,响应结果为空!
因为JDBC的访问基于beenline(它是基于SQLLine CLI的JDBC客户端),所以想要弄清楚缘由还是用beenline 去访问hive server2 ( 远程模式);
beenline 访问hive 和 导入txt文件到hive 中显示权限不足
# 访问hive命令
./beeline -u jdbc:hive2://:10000
# 提示信息
ERROR : Job Submission failed with exception 'org.apache.hadoop.security.AccessControlException
# 用户为anonymous ,没有权限访问!
(Permission denied: user=anonymous, access=WRITE, inode="/user":hdfs:supergroup:drwxr-xr-x
at org.apache.hadoop.hdfs.server.namenode.DefaultAuthorizationProvider.checkFsPermission(DefaultAuthorizationProvider.java:279)
at org.apache.hadoop.hdfs.server.namenode.DefaultAuthorizationProvider.check(DefaultAuthorizationProvider.java:260)
HDFS方式导入txt文件数据到hive中
问题分析与解决
通过日志发现是匿名用户访问权限不足的原因,那么解决权限问题就可以啦!
- 使用jdbc方式连接hive没有提供用户名,hive认为请求者为anonymous 用户;
- 默认情况下,是不允许远程以匿名用户访问的,如果访问会提示权限不足;
提升权限 - JDBC : 在配置文件中写上超级管理员的用户名
#hive 数据仓库配置
hive:
datasource:
url: jdbc:hive2://IP:10000
driver-class-name: org.apache.hive.jdbc.HiveDriver
type: com.alibaba.druid.pool.DruidDataSource
# username依据hadoop生态系统而定
username: hdfs
password:
- beenline: 在连接hive时使用-n 用户名参数指定访问的用户身份
beeline -n hdfs -u jdbc:hive2://IP:10000
总结
问题越早出现越好,在试错中不断成长,加油!