Hive-3.1.2安装部署
一 Hive-3.1.2 网盘下载:
链接:https://pan.baidu.com/s/1c8L3ygVae2kSN-ue8RZNtQ
提取码:chjs
1.下载完成后,上传到Linux的/opt/module下
2.解压并重命名为hive
cd /opt/module
tar -zxvf apache-hive-3.1.2-bin.tar.gz
mv apache-hive-3.1.2-bin hive
3.添加环境变量
vi /etc/profile
export HIVE_HOME=/opt/module/hive
export PATH=$PATH:$HIVE_HOME/bin
source /etc/profile
4.解决jar包冲突
mv $HIVE_HOME/lib/log4j-slf4j-impl-2.10.0.jar $HIVE_HOME/lib/log4j-slf4j-impl-2.10.0.bak
二 安装mysql
mysql下载
链接:https://pan.baidu.com/s/1oXDxXrTiN0a1CB8Kw5_mOg
提取码:jklm
1.检查是否安装过mysql
rpm -qa|grep mariadb
如果没显示内容,则不用进行操作,如果出现内容:
输入
rpm -e --nodeps mariadb-libs
再次查询
2.上传mysql到/opt/software下并解压mysql
通过网盘下载的mysql表明了解压顺序,按顺序解压
rpm -ivh 01_mysql-community-common-5.7.16-1.el7.x86_64
以此类推,一定要按顺序解压,因为不同包之间存在依赖。最后的驱动包结尾带jar的不用解压。
3.删除datadir内容
vi /etc/my.conf
找到datadir所指向的目录复制
进到datadir所在的目录
cd /var/lib/mysql
在这个目录下执行
rm -rf ./*
4.初始化数据库
mysqld --initialize --user=mysql
5.查看临时生成的密码
cat /var/log/mysqld.log
复制临时生成的密码
6.登录到mysql
systemctl start mysqld
mysql -uroot -p
输入复制的密码
7.修改密码
set password = password("新密码");
8.设置允许任意用户连接
update mysql.user set host='%' where user='root';
刷新
flush privileges;
退出
quit;
三 Hive元数据配置到mysql
1.将mysql的驱动包复制到hive的lib目录下
cp /opt/software/mysql-connector-java-5.1.27-bin.jar /opt/module/hive/lib/
2.新建hive-site.xml并编辑
在hive的conf目录下新建hive-site.xml文件
cd /opt/module/hive/conf
touch hive-site.xml
vi hive-site.xml
<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
<!-- jdbc 连接的 URL -->
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://hadoop102:3306/metastore?useSSL=false</value>
</property>
<!-- jdbc 连接的 Driver-->
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<!-- jdbc 连接的 username-->
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
</property>
<!-- jdbc 连接的 password -->
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>000000</value>
</property>
<!-- Hive 元数据存储版本的验证 -->
<property>
<name>hive.metastore.schema.verification</name>
<value>false</value>
</property>
<!--元数据存储授权-->
<property>
<name>hive.metastore.event.db.notification.api.auth</name>
<value>false</value>
</property>
<!-- Hive 默认在 HDFS 的工作目录 -->
<property>
<name>hive.metastore.warehouse.dir</name>
<value>/user/hive/warehouse</value>
</property>
</configuration>
主机名和密码需修改为自己的设置,其他无需修改
保存退出。
3.登录mysql创建hive元数据库
mysql -uroot -p你的密码
create database metastore;
show databases;
如图则正确
4.初始化元数据
schematool -initSchema -dbType mysql -verbose
5.再次启动hive
cd /opt/module/hive
bin/hive
之后进行正常的sql语句操作看是否正常执行