【赫兹威客】伪分布式Hive测试教程

本文档为伪分布式大数据环境(1台虚拟机:hadoop)中Hive组件的功能测试教程,涵盖Hive依赖服务启停、服务状态验证、Hive CLI及Beeline连接测试、核心SQL功能验证等核心场景。严格遵循视频操作流程,详细说明每个步骤的操作要点、执行命令及预期结果,助力高效完成Hive组件可用性及数据查询分析功能验证。

一、前期准备:环境基础信息

测试前需确认环境配置符合要求,避免因基础环境问题导致测试流程中断:

  • 虚拟机配置:1台虚拟机(命名为hadoop),已完成伪分布式部署
  • 系统账号:优先使用hertz账号(密码:hertz);特殊操作需使用root账号(密码:1)
  • 工具准备:Mobaxterm远程连接工具(已安装并可正常使用)

二、Hive测试详细步骤

步骤1:确认虚拟机启动状态

操作说明:启动虚拟机,等待系统加载完成,直至出现登录页面。

预期结果:虚拟机正常启动,显示系统登录界面,无启动报错。

步骤2:使用Mobaxterm连接虚拟机

操作说明:打开本地Mobaxterm工具,按照伪分布式部署教程中的详细步骤建立与虚拟机的远程连接。

核心操作要点:

  • 新建远程连接,选择SSH连接方式
  • 输入虚拟机IP地址(需提前确认正确)
  • 选择登录账号类型(默认为普通用户)

预期结果:Mobaxterm连接成功,进入连接等待登录状态。

步骤3:输入账号密码完成登录

操作说明:在Mobaxterm连接成功后的登录界面,依次完成账号和密码输入。

具体操作:

  • 当终端显示账号输入提示时,输入:hertz
  • 回车后,终端显示密码输入提示,输入:hertz(密码输入时默认不显示明文)
  • 再次回车确认

预期结果:登录成功,终端界面显示当前登录用户及主机信息(如[hertz@hadoop ~]$)。

步骤4:启动Hive相关服务

操作说明:在登录成功的Mobaxterm终端中,按依赖顺序启动相关服务(先启动基础依赖服务,再启动Hive服务)。

具体命令:

  • 启动Hive服务:hive-all.sh start(一键启动Hive metastore和HiveServer2服务)

说明:启动过程中若出现权限提示,直接回车确认即可;需等待前一个服务启动完成(无报错)后,再执行下一个启动命令。

预期结果:所有服务启动无报错,终端依次显示各服务的启动日志信息。

步骤5:验证Hive服务状态

操作说明:在终端中执行Hive服务状态查询命令,观察服务启动后的状态变化(首次查询可能异常,等待片刻后再次查询)。

具体操作:

  • 等待片刻(约30秒-1分钟,让服务完成初始化)
  • 第二次查询:再次输入命令:hive-all.sh status

预期结果:

  • 第一次查询:终端显示metastore、hiveserver2服务状态为异常(未完全初始化完成)
  • 第二次查询:终端显示metastore、hiveserver2服务状态为正常(运行中),无异常提示。

步骤6:Hive CLI连接及基础操作

操作说明:通过Hive CLI(命令行界面)连接Hive,执行基础命令验证连接可用性。

具体操作:

  • 启动Hive CLI:在终端输入命令:hive
  • 查询数据库:进入CLI后,输入命令:show databases;
  • 退出Hive CLI:输入命令:exit;

预期结果:

  • hive命令执行无报错,成功进入Hive CLI环境,终端显示"hive> "提示符
  • 执行show databases;命令后,正常显示Hive中的数据库列表(默认包含default数据库)
  • 执行exit;命令后,正常退出Hive CLI,返回终端默认交互界面。

步骤7:Beeline连接HiveServer2

操作说明:通过Beeline工具连接HiveServer2服务,建立JDBC连接。

具体操作:

  • 启动Beeline:在终端输入命令:beeline
  • 建立JDBC连接:进入Beeline后,输入命令:!connect jdbc:hive2://hadoop:10000
  • 输入账号密码:按提示输入登录账号(hertz)和密码(hertz),回车确认

预期结果:

  • beeline命令执行无报错,进入Beeline交互环境,显示"beeline> "提示符
  • JDBC连接建立成功,无连接超时或拒绝连接错误,终端显示连接成功提示信息。

步骤8:SQL功能验证

操作说明:在Beeline连接成功后,执行SQL命令,验证Hive的核心数据操作功能。

参考SQL操作:

  • Hive执行引擎设置:set hive.execution.engine=mr;
  • 创建数据库:create database test_my_hive;
  • 使用数据库:use test_my_hive;
  • 创建数据表:create table test_my_table(id int, name string) row format delimited fields terminated by ',';
  • 插入测试数据:insert into test_my_table values(1, 'hive'), (2, 'spark');
  • 查询数据:select * from test_my_table;

预期结果:所有SQL命令执行无报错,执行查询命令后能正常返回对应结果,数据插入、查询等功能正常。

步骤9:关闭Hive相关服务

操作说明:测试完成后,在终端中按与启动相反的顺序关闭所有相关服务,避免资源占用或数据损坏。

具体命令:

  • 关闭Hive服务:hive-all.sh stop(一键关闭Hive metastore和HiveServer2服务)

预期结果:所有服务均正常关闭,无报错提示。

相关推荐
aixingkong9212 小时前
NVIDIA NVL72 超节点分析
人工智能·硬件架构·硬件工程
天选硬件打工人5 小时前
第二十九篇:【硬件工程师筑基系列 6-2】样板上电前全检查与安全上电流程 | 避免炸板的核心防线
单片机·嵌入式硬件·安全·硬件架构·硬件工程·射频工程
智者知已应修善业21 小时前
【文氏电桥振荡电路】2022-8-25
驱动开发·经验分享·笔记·硬件架构·硬件工程
天选硬件打工人2 天前
第二十三篇:【硬件工程师筑基系列 5-2】PCB 设计核心基础 | 叠层设计、焊盘封装与 DFM 可制造性规范
单片机·嵌入式硬件·硬件架构·硬件工程·制造·基带工程
天上路人3 天前
A-59F 多功能语音处理模组在本地会议系统扩音啸叫处理中的技术应用与性能分析
人工智能·神经网络·算法·硬件架构·音视频·语音识别·实时音视频
学嵌入式的小杨同学3 天前
STM32 进阶封神之路(三十):IIC 通信深度实战 —— 软件模拟 IIC + 光照传感器(BH1750)全解析(底层时序 + 代码落地)
stm32·单片机·嵌入式硬件·mcu·硬件架构·硬件工程·智能硬件
电子科技圈3 天前
SmartDV展示汽车IP解决方案以赋能智驾创芯并加速规模化普及
嵌入式硬件·设计模式·硬件架构·软件工程·软件构建·设计规范
学嵌入式的小杨同学5 天前
STM32 进阶封神之路(二十七):MQTT 深度解析 —— 从协议原理到 OneNET 云平台接入(底层逻辑 + AT 指令开发)
stm32·单片机·嵌入式硬件·mcu·硬件架构·pcb·嵌入式实时数据库
学嵌入式的小杨同学6 天前
STM32 进阶封神之路(二十六):ESP8266 实战全攻略 ——TCP 通信 + 数据上传 + 远程控制 + 透传模式(库函数 + 代码落地)
stm32·单片机·嵌入式硬件·mcu·硬件架构·硬件工程·智能硬件
weiyvyy6 天前
嵌入式硬件接口开发的流程
人工智能·驱动开发·单片机·嵌入式硬件·硬件架构·硬件工程