集群搭建之Hive配置要点

时间：2020-12-15 04:47:56

注意点：

  • 在启动Hive 的时候要先启动Hadoop和MySQL服务。
  • Mysql 和 Hive 搭建在 yan00机器上。

part1：MySQL配置相关

  • 安装和配置相关命令：
Yum install mysql
Yum install mysql-server
/etc/init.d/mysqld start
mysqladmin -u root password "123456"

集群搭建之Hive配置要点

  • 创建hive元数据库。

    集群搭建之Hive配置要点

part2：Hive配置相关

几个重要的安装文件

文件名
mysql-connector-java-5.1.17.jar
jline-2.12.jar

操作步骤

  • 解压hive 包到特定目录下。
  • 安装 mysql connector。
yum install -y mysql-connector-java
  • 将mysql connector拷贝到hive的lib包中。
cp /usr/share/java/mysql-connector-java-5.1.17.jar /usr/local/src/hive/lib

./conf 文件夹下的配置

  • hive-site.xml 文件配置。
mv hive-default.xml.template hive-site.xml
<property>

<name>javax.jdo.option.ConnectionURL</name>

<value>jdbc:mysql://localhost:3306/hive?createDatabaseIfNotExist=true</value>

<description>JDBC connect string for a JDBC metastore</description>

</property>

<property>

<name>javax.jdo.option.ConnectionDriverName</name>

<value>com.mysql.jdbc.Driver</value>

<description>Driver class name for a JDBC metastore</description>

</property>

<property>

<name>javax.jdo.option.ConnectionUserName</name>

<value>root</value>

<description>username to use against metastore database</description>

</property>

<property>

<name>javax.jdo.option.ConnectionPassword</name>

<value>123456</value>

<description>password to use against metastore database</description>

</property>
  • 生成hive-env.sh文件
mv hive-env.sh.template hive-env.sh

./bin文件夹下的配置

  • hive-config.sh文件中添加如下配置。
export JAVA_HOME=/usr/local/src/jdk1.8.0_151

export HADOOP_HOME=/usr/local/src/hadoop

export HIVE_HOME=/usr/local/src/hive

~/.bashrc 中添加环境变量

#hive conf

export HIVE_HOME=/usr/local/src/hive

export PATH=$PATH:$HIVE_HOME/bin
source ~/.bashrc

集群搭建之Hive配置要点

异常处理

Found class jline.Terminal, but interface was expected

可行的解决方案

  • 将hive的./lib文件夹下的jline-2.12.jar文件拷贝到hadoop的 ./share/hadoop/yarn/lib目录下。

    集群搭建之Hive配置要点

相关文章