hive的安装

下载mysql

yum install mysql57-community-release-el7-9.noarch.rpm

安装数据库服务

yum install mysql-community-server

若报错,尚未安装 公钥 ,输入以下命令:

rpm --import https://repo.mysql.com/RPM-GPG-KEY-mysql-2022

重新启动m ysql 服务

systemctl restart mysqld

查看 mysql 初始密码

grep "password" /var/log/mysqld.log

登录m ysql

mysql -uroot -p

  1. 设置 密码强度

set global validate_password_policy=LOW;

  1. 设置 密码长度

set global validate_password_length=4;

  1. 修改密码

ALTER USER 'root'@'localhost' IDENTIFIED BY '123456';

  1. 退出 mysql :

exit; 或者 quit;

  1. 重新登录mysql:
  2. 新建一个数据库hivedb:

Create database hivedb;
use mysql;

update user set host='%' where user ='root';

复制代码
FLUSH PRIVILEGES;

hive

  1. 解压 hive 安装包 /opt/module/

tar-zxvf apache-hive-3.1.2-bin.tar.gz -C /opt/module/

  1. 修改 文件夹名

mv apache-hive-3.1.2-bin hive-3.1.2

  1. 配置环境变量:

vi /etc/profile

在末尾添加如下内容

export HIVE_HOME=/opt/module/hive-3.1.4

export PATH=PATH:HIVE_HOME/bin

  1. source 使 环境变量 生效

source /etc/profile

  1. 将mysql的jar包放到Hive 安装 目录下的l ib (配置 mysql jdbc驱动

cp /opt/software/mysql-connector-java-5.1.37.jar $HIVE_HOME/lib

  1. 在h i ve下的conf里配置h ive-site.xml

输入新建文件命令:touch hive-site.xml

将以下内容复制。

<configuration>

<!--hive连接数据库URL-->

<property>

<name>javax.jdo.option.ConnectionURL</name>

<value>jdbc:mysql://master:3306/hivedb?useSSL=false</value>

<description>JDBC connect string for a JDBC metastore</description>

</property>

<!-- JDBC的连接的Driver-->

<property>

<name>javax.jdo.option.ConnectionDriverName</name>

<value>com.mysql.jdbc.Driver</value>

<description>Driver class name for a JDBC metastore</description>

</property>

<!-- JDBC的连接username-->

<property>

<name>javax.jdo.option.ConnectionUserName</name>

<value>root</value>

<description>username to use against metastore database</description>

</property>

<!-- JDBC的连接密码-->

<property>

<name>javax.jdo.option.ConnectionPassword</name>

<value>123456</value>

<description>password to use against metastore database</description>

</property>

<!-- Hive数据仓库的数据存储在HDFS上的目录-->

<property>

<name>hive.metastore.warehouse.dir</name>

<value>/user/hive/warehouse</value>

<description>hive default warehouse, if nessecory, change it</description>

</property>

<!-- Hive Server2 的连接端口-->

<property>

<name>hive.server2.thrift.port</name>

<value>10000</value>

</property>

<!-- Hive Server2 的连接host-->

<property>

<name>hive.server2.thrift.bind.host</name>

<value>10000</value>

</property>

<!--存储元数据要连接的地址-->

<property>

<name>hive.metastore.uris</name>

<value>thrift://master:9083</value>

</property>

<!-- 元数据存储授权-->

<property>

<name>hive.metastore.event.db.notification.api.auth</name>

<value>false</value>

</property>

<!-- 元数据储存版权的认证-->

<property>

<name>hive.metastore.schema.verification</name>

<value>false</value>

</property>

<!-- Server2的高可用参数,开启参数可以提高hiveservers2的1启动速度-->

<property>

<name>hive.server2.active.passive.ha.enable</name>

<value>true</value>

</property>

</configuration>

  1. 在h i ve下的conf里配置h ive-env.sh 文件 ,如上面方法,新建文件后复制以下内容。

export HADOOP_HOME=/opt/module/hadoop-3.1.4

export HIVE_CONF_DIR=/opt/module/hive-3.1.2/conf

初始化元数据

schematool -dbType mysql -initSchema

启动元数据服务:

切换目录 cd /opt/module/hive-3.1.2/bin

启动元数据服务 ./hive --service metastore &

hive

相关推荐
RestCloud2 小时前
ETL数据质量保障:如何通过优化提升数据准确性?
数据仓库·etl·数据处理·数据传输·数据同步·数据集成平台
隐于花海,等待花开11 小时前
40.RAND 函数深度解析
hive·hadoop
2501_927283581 天前
荣联汇智助力天津艺虹打造“软硬一体”智慧工厂,全流程自动化引领印刷包装行业数智变革
大数据·运维·数据仓库·人工智能·低代码·自动化
孤雪心殇1 天前
快速上手数仓基础知识
数据仓库·hive·spark
渣渣盟1 天前
数据仓库 vs 数据湖 vs 湖仓一体:架构演进与选型
数据仓库·架构
隐于花海,等待花开2 天前
39.ROUND / FLOOR / CEIL 函数深度解析
hive·hadoop
juniperhan2 天前
Flink 系列第22篇:Flink SQL 参数配置与性能调优指南:从 Checkpoint 到聚合优化
大数据·数据仓库·分布式·sql·flink
juniperhan2 天前
Flink 系列第21篇:Flink SQL 函数与 UDF 全解读:类型推导、开发要点与 Module 扩展
java·大数据·数据仓库·分布式·sql·flink
看海的四叔2 天前
【SQL】SQL-管好你的字符串
大数据·数据库·hive·sql·数据分析·字符串
坚持就完事了2 天前
YARN资源管理器
大数据·linux·hadoop·学习