HIVE的安装部署

2021-02-05 11:45:33 浏览数 (1)

文章目录

    • 为什么安装hive,首先要先安装MySQL?
    • MySQL数据库的安装(使用yum源进行安装,在集群中的一个节点上安装)
  • 安装hive
    • 第一步:上传hive的压缩包到 /export/softwares/
    • 第二步:将安装包解压到 /export/servers
    • 第三步:修改 hive 的配置文件
    • 第四步:上传 MySQL 的 lib 驱动包
    • 第五步:将安装包发送给其他两个节点
    • 第六步:配置hive的环境变量
    • 第七步:把hive环境变量发送给其他节点
    • 第八步:对每个节点进行 source
    • 在虚拟机输入 hive 出现下图 代表hive安装好了
    • 使用小海豚连接虚拟机里的MySQL

为什么安装hive,首先要先安装MySQL?

在每一个节点上安装hive,每一个hive是拥有一套自己的元数据,每个节点的库,表就不统一。所以安装一个MySQL让其他的节点都连接这一个MySQL。

MySQL数据库的安装(使用yum源进行安装,在集群中的一个节点上安装)

第一步:在线安装MySQLMySQL相关的软件包

代码语言:javascript复制
yum install -y mysql mysql-server mysql-devel

第二步:启动MySQL的服务,并设设置MySQL开机自启动

代码语言:javascript复制
service mysqld start
chkconfig mysqld on

第三步:进入MySQL的客户端然后进行授权

代码语言:javascript复制
//进入mysql
mysql
//使用mysql数据库
use mysql;
//配置远程连接
grant all privileges on *.* to 'root'@'%' identified by '123456' with grant option;
//刷新
 flush privileges;

第四步:设置root用户连接MySQL的密码

代码语言:javascript复制
//设置密码
update user set password=password('123456') where user='root';
//刷新
flush privileges;

注:设置完密码后,在进入MySQL的命令是:mysql -uroot -p123456

安装hive

第一步:上传hive的压缩包到 /export/softwares/

第二步:将安装包解压到 /export/servers

代码语言:javascript复制
cd /export/servers/
tar -zxvf /export/softwares/hive-1.1.0-cdh5.14.0.tar.gz 

第三步:修改 hive 的配置文件

**修改 hive-env.sh **

代码语言:javascript复制
//添加我们的hadoop的环境变量:
cd  /export/servers/hive-1.1.0-cdh5.14.0/conf
cp hive-env.sh.template hive-env.sh
vim hive-env.sh

HADOOP_HOME=${HADOOP_HOME}
export HIVE_CONF_DIR=/export/servers/hive-1.1.0-cdh5.14.0/conf

修改 hive-site.xml

代码语言:javascript复制
cd /export/servers/hive-1.1.0-cdh5.14.0/conf
vim hive-site.xml

<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
        <property>
                <name>javax.jdo.option.ConnectionURL</name>
                <value>jdbc:mysql://node03:3306/hive?createDatabaseIfNotExist=true</value>
        </property>

        <property>
                <name>javax.jdo.option.ConnectionDriverName</name>
                <value>com.mysql.jdbc.Driver</value>
        </property>
        <property>
                <name>javax.jdo.option.ConnectionUserName</name>
                <value>root</value>
        </property>
        <property>
                <name>javax.jdo.option.ConnectionPassword</name>
                <value>123456</value>
        </property>
        <property>
                <name>hive.cli.print.current.db</name>
                <value>true</value>
        </property>
        <property>
                <name>hive.cli.print.header</name>
                <value>true</value>
        </property>
        <property>
                <name>hive.server2.thrift.bind.host</name>
                <value>node03</value>
        </property>
<!--
        <property>
                <name>hive.metastore.uris</name>
                <value>thrift://node03:9083</value>
        </property>
-->
</configuration>

注:这里的node03,是因为MySQL安装在node03的节点上

第四步:上传 MySQL 的 lib 驱动包

代码语言:javascript复制
//将mysql的lib驱动包上传到hive的lib目录下
cd /export/servers/hive-1.1.0-cdh5.14.0/lib
//将mysql-connector-java-5.1.38.jar 上传到这个目录下

第五步:将安装包发送给其他两个节点

代码语言:javascript复制
spc -r /export/servers/hive-1.1.0-cdh5.14.0/ node02:$PWD
spc -r /export/servers/hive-1.1.0-cdh5.14.0/ node0:$PWD

第六步:配置hive的环境变量

代码语言:javascript复制
vi hive.sh 

export HIVE_HOME=/export/servers/hive-1.1.0-cdh5.14.0
export PATH=:$PATH:$HIVE_HOME/bin

第七步:把hive环境变量发送给其他节点

代码语言:javascript复制
spc /etc/profile.d/hive.sh node02:$PWD
spc /etc/profile.d/hive.sh node0:$PWD

第八步:对每个节点进行 source

代码语言:javascript复制
source /etc/profile

此时hive就安装好了

在虚拟机输入 hive 出现下图 代表hive安装好了

使用小海豚连接虚拟机里的MySQL

0 人点赞