hive的安装

下载mysql

yum install mysql57-community-release-el7-9.noarch.rpm

安装数据库服务

yum install mysql-community-server

若报错,尚未安装 公钥 ,输入以下命令:

rpm --import https://repo.mysql.com/RPM-GPG-KEY-mysql-2022

重新启动m ysql 服务

systemctl restart mysqld

查看 mysql 初始密码

grep "password" /var/log/mysqld.log

登录m ysql

mysql -uroot -p

  1. 设置 密码强度

set global validate_password_policy=LOW;

  1. 设置 密码长度

set global validate_password_length=4;

  1. 修改密码

ALTER USER 'root'@'localhost' IDENTIFIED BY '123456';

  1. 退出 mysql :

exit; 或者 quit;

  1. 重新登录mysql:
  2. 新建一个数据库hivedb:

Create database hivedb;
use mysql;

update user set host='%' where user ='root';

复制代码
FLUSH PRIVILEGES;

hive

  1. 解压 hive 安装包 /opt/module/

tar-zxvf apache-hive-3.1.2-bin.tar.gz -C /opt/module/

  1. 修改 文件夹名

mv apache-hive-3.1.2-bin hive-3.1.2

  1. 配置环境变量:

vi /etc/profile

在末尾添加如下内容

export HIVE_HOME=/opt/module/hive-3.1.4

export PATH=PATH:HIVE_HOME/bin

  1. source 使 环境变量 生效

source /etc/profile

  1. 将mysql的jar包放到Hive 安装 目录下的l ib (配置 mysql jdbc驱动

cp /opt/software/mysql-connector-java-5.1.37.jar $HIVE_HOME/lib

  1. 在h i ve下的conf里配置h ive-site.xml

输入新建文件命令:touch hive-site.xml

将以下内容复制。

<configuration>

<!--hive连接数据库URL-->

<property>

<name>javax.jdo.option.ConnectionURL</name>

<value>jdbc:mysql://master:3306/hivedb?useSSL=false</value>

<description>JDBC connect string for a JDBC metastore</description>

</property>

<!-- JDBC的连接的Driver-->

<property>

<name>javax.jdo.option.ConnectionDriverName</name>

<value>com.mysql.jdbc.Driver</value>

<description>Driver class name for a JDBC metastore</description>

</property>

<!-- JDBC的连接username-->

<property>

<name>javax.jdo.option.ConnectionUserName</name>

<value>root</value>

<description>username to use against metastore database</description>

</property>

<!-- JDBC的连接密码-->

<property>

<name>javax.jdo.option.ConnectionPassword</name>

<value>123456</value>

<description>password to use against metastore database</description>

</property>

<!-- Hive数据仓库的数据存储在HDFS上的目录-->

<property>

<name>hive.metastore.warehouse.dir</name>

<value>/user/hive/warehouse</value>

<description>hive default warehouse, if nessecory, change it</description>

</property>

<!-- Hive Server2 的连接端口-->

<property>

<name>hive.server2.thrift.port</name>

<value>10000</value>

</property>

<!-- Hive Server2 的连接host-->

<property>

<name>hive.server2.thrift.bind.host</name>

<value>10000</value>

</property>

<!--存储元数据要连接的地址-->

<property>

<name>hive.metastore.uris</name>

<value>thrift://master:9083</value>

</property>

<!-- 元数据存储授权-->

<property>

<name>hive.metastore.event.db.notification.api.auth</name>

<value>false</value>

</property>

<!-- 元数据储存版权的认证-->

<property>

<name>hive.metastore.schema.verification</name>

<value>false</value>

</property>

<!-- Server2的高可用参数,开启参数可以提高hiveservers2的1启动速度-->

<property>

<name>hive.server2.active.passive.ha.enable</name>

<value>true</value>

</property>

</configuration>

  1. 在h i ve下的conf里配置h ive-env.sh 文件 ,如上面方法,新建文件后复制以下内容。

export HADOOP_HOME=/opt/module/hadoop-3.1.4

export HIVE_CONF_DIR=/opt/module/hive-3.1.2/conf

初始化元数据

schematool -dbType mysql -initSchema

启动元数据服务:

切换目录 cd /opt/module/hive-3.1.2/bin

启动元数据服务 ./hive --service metastore &

hive

相关推荐
ljs64827395111 小时前
Hadoop集群部署常见问题
大数据·hadoop·分布式
TTBIGDATA21 小时前
【Ambari Plus】14.Hue 安装
大数据·hadoop·ambari·hdp·hue·cdh·bigtop
RestCloud1 天前
借助ETL工具,实现AI智能体+数据的落地
数据仓库·人工智能·sql·etl·etlcloud·数据集成平台·java脚本
AllData公司负责人1 天前
数据库同步平台|AIIData数据中台实现OceanBase、达梦数据库、OpenGauss、人大金仓、Hive、TDengine 一键接入Doris
大数据·数据库·hive·mysql·oceanbase·tdengine
2501_942389551 天前
特斯拉的车辆摄像头每四天为AI训练集采集的数据量
人工智能·hadoop·zookeeper·oracle·时序数据库·memcache
AllData公司负责人1 天前
数据同步平台|AIIData数据中台实现MySQL、Hive、Kafka 一键接入Doris
大数据·数据库·hive·mysql·kafka·实时同步
RestCloud1 天前
2026数据集成工具最新选型建议:ETL/ELT怎么选,都应该带有什么功能
数据仓库·etl·etlcloud·数据传输·数据同步·数据集成工具·elt
牛奶咖啡131 天前
大数据Hadoop运维应用实践——Hadoop大数据平台基础与架构(hadoop伪分布式的安装部署)
大数据·hadoop·分布式·hadoop是什么?有啥用?·hadoop的适用与不适用场景·hadoop伪分布式的安装部署·hadoop分布式存储操作
last_zhiyin1 天前
一步步上手ETL工具之------Informatica PowerCenter
数据仓库·etl·数据处理·powercenter·informatica
TTBIGDATA2 天前
【Ambari Plus】15.Livy 安装
大数据·运维·hadoop·ambari·hdp·cdh·bigtop