Hive 安装

目录

[Hive 安装](#Hive 安装)

[Hive 安装地址](#Hive 安装地址)

[Hive 安装部署](#Hive 安装部署)

[安装 Hive](#安装 Hive)

[启动并使用 Hive](#启动并使用 Hive)


Hive 安装

Hive 安装地址

1)Hive 官网地址

Apache Hivehttp://hive.apache.org/

2)文档查看地址

GettingStarted - Apache Hive - Apache Software Foundationhttps://cwiki.apache.org/confluence/display/Hive/GettingStarted

3)下载地址

Index of /dist/hivehttp://archive.apache.org/dist/hive/

4)GitHub 地址

https://github.com/apache/hivehttps://github.com/apache/hive

Hive 安装部署

安装 Hive

  1. apache-hive-3.1.3-bin.tar.gz 上传到 Linux 的 /opt/software 目录下

  2. 解压 apache-hive-3.1.3-bin.tar.gz/opt/module/ 目录下面

    复制代码
    [lzl@hadoop12 software]$ tar -zxvf /opt/software/apache-hive-3.1.3-bin.tar.gz -C /opt/module/
  3. 修改 apache-hive-3.1.3-bin.tar.gz 的名称为 hive

    复制代码
    [lzl@hadoop12 software]$ mv /opt/module/apache-hive-3.1.3-bin/ /opt/module/hive
  4. 修改 /etc/profile.d/my_env.sh,添加环境变量

    复制代码
    [lzl@hadoop12 software]$ sudo vim /etc/profile.d/my_env.sh

    (1)添加内容

    复制代码
    # HIVE_HOME
    export HIVE_HOME=/opt/module/hive
    export PATH=$PATH:$HIVE_HOME/bin

    (2)source 一下

    复制代码
    [lzl@hadoop12 hive]$ source /etc/profile.d/my_env.sh
  5. 初始化元数据库(默认是 Derby 数据库)

    复制代码
    [lzl@hadoop12 hive]$ bin/schematool -dbType derby -initSchema

启动并使用 Hive

  1. 启动 Hive

    复制代码
    [lzl@hadoop12 hive]$ bin/hive
  2. 使用 Hive

    sql 复制代码
    hive> show databases;
    hive> show tables;
    hive> create table stu(id int, name string);
    hive> insert into stu values(1,"ss");
    hive> select * from stu;

    观察 HDFS 的路径 /user/hive/warehouse/stu,体会 Hive 与 Hadoop 之间的关系。

    • Hive 中的表在 Hadoop 中是目录;
    • Hive 中的数据在 Hadoop 中是文件。
  3. 在 XShell 窗口中开启另一个窗口开启 Hive,在 /tmp/lzl 目录下监控 hive.log 文件

    sql 复制代码
    [lzl@hadoop12 lzl]$ tail -f hive.log
    sql 复制代码
    Caused by: ERROR XSDB6: Another instance of Derby may have already booted the database /opt/module/hive/metastore_db.
    
    at org.apache.derby.iapi.error.StandardException.newException(Unknown Source)
    at org.apache.derby.iapi.error.StandardException.newException(Unknown Source)
    at org.apache.derby.impl.store.raw.data.BaseDataFileFactory.privGetJBMSLockOnDB(Unknown Source)
    at org.apache.derby.impl.store.raw.data.BaseDataFileFactory.run(Unknown Source)
    ...

    原因在于 Hive 默认使用的元数据库为 Derby。Derby 数据库的特点是同一时间只允许一个客户端访问。如果多个 Hive 客户端同时访问,就会报错。由于在企业开发中,都是多人协作开发,需要多客户端同时访问 Hive,怎么解决呢?我们可以将 Hive 的元数据改为用 MySQL 存储,MySQL 支持多客户端同时访问。

  4. 首先退出 Hive 客户端。然后在 Hive 的安装目录下将 derby.logmetastore_db 删除,顺便将 HDFS 上目录删除

    sql 复制代码
    hive> quit;
    sql 复制代码
    [lzl@hadoop12 hive]$ rm -rf derby.log metastore_db
    [lzl@hadoop12 hive]$ hadoop fs -rm -r /user
  5. 删除 HDFS 中 /user/hive/warehouse/stu 中的数据

相关推荐
焦虑的说说几秒前
redis和数据库的一致性如何保证
数据库·redis·缓存
申通之声15 分钟前
以体验和AI重构竞争力,申通要“构建生态共同体”
大数据·网络·人工智能·重构·交通物流
terry60015 分钟前
2026图形验证码服务商横向测评|口碑、接入、安全选型全指南
java·大数据·人工智能·web安全·信息与通信·数据库架构
量化君也30 分钟前
从回测到全自动实盘交易,全天候策略需要经历哪些改造?
大数据·人工智能·python·算法·金融
阿狸猿44 分钟前
论基于云原生数据库的企业信息系统架构设计
数据库·云原生
KaMeidebaby1 小时前
卡梅德生物技术快报|纳米抗体表达:分子生物学实操指南:噬菌体筛选与纳米抗体表达全流程技术拆解
大数据·人工智能·架构·spark·新浪微博
zhengzhouliuhaha2 小时前
智能医疗设备控费系统:以全院一体化管控,筑牢医疗资源“安全阀”
大数据·数据结构·人工智能·算法·安全·机器学习·软件需求
MXsoft6182 小时前
**配置自动备份与变更告警:杜绝“黑变更”风险**
网络·数据库
云边云科技_云网融合2 小时前
共建智能体互联网新生态|云边云科技亮相智能体互联网生态共建大会
大数据·人工智能
智能化咨询2 小时前
(105页PPT)智慧商圈解决方案(附下载方式)
大数据