Hive实战任务 - 9.2 统计总分与平均分

文章目录

  • [1. 实战概述](#1. 实战概述)
  • [2. 实战步骤](#2. 实战步骤)
  • [3. 实战总结](#3. 实战总结)

1. 实战概述

  • 本实战通过Hive处理学生成绩数据,创建内部表加载HDFS中的score.txt文件,利用SQL计算每位学生的总分与平均分,并以分列式和三元组格式输出结果,最终将统计结果持久化至HDFS目录,完整展示了Hive在结构化数据分析中的应用流程。

2. 实战步骤

3. 实战总结

  • 本次实战围绕学生成绩分析,系统完成了从数据准备到结果输出的全过程。首先在本地创建包含姓名及五科成绩的文本文件并上传至HDFS;接着在Hive中定义内部表t_score,指定字段分隔符为空格,并通过LOAD DATA加载数据;随后使用SQL表达式对各科成绩求和并计算平均分,结合ROUND函数保留一位小数,确保结果精度;通过CONCAT函数将结果格式化为指定三元组形式;最后利用INSERT OVERWRITE DIRECTORY将查询结果导出至HDFS输出路径。整个过程体现了Hive对结构化数据的高效处理能力,强化了对表创建、数据加载、聚合计算及结果持久化的理解,为后续教育或业务场景中的批量数据分析提供了可复用的实践范式。
相关推荐
大鳥13 小时前
数据仓库知识体系
hive·hadoop
talle202114 小时前
Hive | 行列转换
数据仓库·hive·hadoop
talle202116 小时前
Hive | json数据处理
hive·hadoop·json
CTO Plus技术服务中16 小时前
Hive开发与运维教程
数据仓库·hive·hadoop
Gain_chance16 小时前
28-学习笔记尚硅谷数仓搭建-DWD层交易域加购事务事实表建表语句及详细分析
数据仓库·hive·笔记·学习·datagrip
小邓睡不饱耶17 小时前
Hive 实战:数据仓库建模、SQL 进阶与企业级案例
数据仓库·hive·sql
小邓睡不饱耶1 天前
Sqoop 实战:数据迁移核心案例、优化技巧与企业级落地
hive·hadoop·sqoop
沃达德软件1 天前
重点人员动态管控系统解析
数据仓库·人工智能·hive·hadoop·redis·hbase
ruxshui2 天前
个人笔记: 星环Inceptor/hive普通分区表与范围分区表核心技术总结
hive·hadoop·笔记
Gain_chance2 天前
26-学习笔记尚硅谷数仓搭建-DIM层特殊的维度表——用户维度表的建表、分析及DIM层数据装载脚本
数据仓库·hive·笔记·学习