hive的安装

下载mysql

yum install mysql57-community-release-el7-9.noarch.rpm

安装数据库服务

yum install mysql-community-server

若报错,尚未安装 公钥 ,输入以下命令:

rpm --import https://repo.mysql.com/RPM-GPG-KEY-mysql-2022

重新启动m ysql 服务

systemctl restart mysqld

查看 mysql 初始密码

grep "password" /var/log/mysqld.log

登录m ysql

mysql -uroot -p

  1. 设置 密码强度

set global validate_password_policy=LOW;

  1. 设置 密码长度

set global validate_password_length=4;

  1. 修改密码

ALTER USER 'root'@'localhost' IDENTIFIED BY '123456';

  1. 退出 mysql :

exit; 或者 quit;

  1. 重新登录mysql:
  2. 新建一个数据库hivedb:

Create database hivedb;
use mysql;

update user set host='%' where user ='root';

复制代码
FLUSH PRIVILEGES;

hive

  1. 解压 hive 安装包 /opt/module/

tar-zxvf apache-hive-3.1.2-bin.tar.gz -C /opt/module/

  1. 修改 文件夹名

mv apache-hive-3.1.2-bin hive-3.1.2

  1. 配置环境变量:

vi /etc/profile

在末尾添加如下内容

export HIVE_HOME=/opt/module/hive-3.1.4

export PATH=PATH:HIVE_HOME/bin

  1. source 使 环境变量 生效

source /etc/profile

  1. 将mysql的jar包放到Hive 安装 目录下的l ib (配置 mysql jdbc驱动

cp /opt/software/mysql-connector-java-5.1.37.jar $HIVE_HOME/lib

  1. 在h i ve下的conf里配置h ive-site.xml

输入新建文件命令:touch hive-site.xml

将以下内容复制。

<configuration>

<!--hive连接数据库URL-->

<property>

<name>javax.jdo.option.ConnectionURL</name>

<value>jdbc:mysql://master:3306/hivedb?useSSL=false</value>

<description>JDBC connect string for a JDBC metastore</description>

</property>

<!-- JDBC的连接的Driver-->

<property>

<name>javax.jdo.option.ConnectionDriverName</name>

<value>com.mysql.jdbc.Driver</value>

<description>Driver class name for a JDBC metastore</description>

</property>

<!-- JDBC的连接username-->

<property>

<name>javax.jdo.option.ConnectionUserName</name>

<value>root</value>

<description>username to use against metastore database</description>

</property>

<!-- JDBC的连接密码-->

<property>

<name>javax.jdo.option.ConnectionPassword</name>

<value>123456</value>

<description>password to use against metastore database</description>

</property>

<!-- Hive数据仓库的数据存储在HDFS上的目录-->

<property>

<name>hive.metastore.warehouse.dir</name>

<value>/user/hive/warehouse</value>

<description>hive default warehouse, if nessecory, change it</description>

</property>

<!-- Hive Server2 的连接端口-->

<property>

<name>hive.server2.thrift.port</name>

<value>10000</value>

</property>

<!-- Hive Server2 的连接host-->

<property>

<name>hive.server2.thrift.bind.host</name>

<value>10000</value>

</property>

<!--存储元数据要连接的地址-->

<property>

<name>hive.metastore.uris</name>

<value>thrift://master:9083</value>

</property>

<!-- 元数据存储授权-->

<property>

<name>hive.metastore.event.db.notification.api.auth</name>

<value>false</value>

</property>

<!-- 元数据储存版权的认证-->

<property>

<name>hive.metastore.schema.verification</name>

<value>false</value>

</property>

<!-- Server2的高可用参数,开启参数可以提高hiveservers2的1启动速度-->

<property>

<name>hive.server2.active.passive.ha.enable</name>

<value>true</value>

</property>

</configuration>

  1. 在h i ve下的conf里配置h ive-env.sh 文件 ,如上面方法,新建文件后复制以下内容。

export HADOOP_HOME=/opt/module/hadoop-3.1.4

export HIVE_CONF_DIR=/opt/module/hive-3.1.2/conf

初始化元数据

schematool -dbType mysql -initSchema

启动元数据服务:

切换目录 cd /opt/module/hive-3.1.2/bin

启动元数据服务 ./hive --service metastore &

hive

相关推荐
5***79001 天前
JavaScript生成器函数
hive·tidb·consul
顧棟2 天前
HDFS元数据与auditlog结合Hive元数据统计分析
hive·hadoop·hdfs
z***89712 天前
【分布式】Hadoop完全分布式的搭建(零基础)
大数据·hadoop·分布式
Kevinyu_2 天前
责任链模式
java·hadoop·责任链模式
yumgpkpm2 天前
腾讯云TBDS与CDH迁移常见问题有哪些?建议由CDH迁移到CMP 7.13 平台(类Cloudera CDP,如华为鲲鹏 ARM 版)
hive·hadoop·zookeeper·flink·spark·kafka·hbase
hexionly2 天前
数据仓库·架构,建模(二)
数据仓库
yumgpkpm3 天前
数据可视化AI、BI工具,开源适配 Cloudera CMP 7.3(或类 CDP 的 CMP 7.13 平台,如华为鲲鹏 ARM 版)值得推荐?
人工智能·hive·hadoop·信息可视化·kafka·开源·hbase
二进制_博客3 天前
使用datax将mysql数据抽取到hive分区表无数据
数据库·hive·mysql
干就完事了3 天前
Hive视图
数据仓库·hive·hadoop
Linux Huang3 天前
【Dinky】IDEA运行出现HistoryServer异常
java·hadoop·flink·intellij idea