【Hadoop实训】Hive 数据操作②

延续上一篇文章,不懂的宝子们请看以下链接:

【Hadoop实训】Hive 数据操作①-CSDN博客


目录

[一、Group by 语句](#一、Group by 语句)

(1)、计算emp表每个部门的平均工资

(2)、计算emp表每个部门中每个岗位的最高工资

[二、Having 语句](#二、Having 语句)

(1)、求每个部门的平均工资

(2)、求每个部门的平均工资大于22000的部门

[三、Order by 语句](#三、Order by 语句)

(1)、查询员工信息,按工资降序排列

(2)、按照部门和工资升序排序

[四、Sort by语句](#四、Sort by语句)

(1)、设置reduce个数

(2)、查看设置reduce个数

(3)、根据部门编号降序查看员工信息

[(4) 、将在询结果导入到文件中(按照部门编号降序排序)](#(4) 、将在询结果导入到文件中(按照部门编号降序排序))

[五、Distribute by](#五、Distribute by)

[六、Cluster by](#六、Cluster by)

[七、Join 操作](#七、Join 操作)

[(1) 、根据员工表和部门表中的部门编号相等,查询员工编号、员工名称和部门编号:](#(1) 、根据员工表和部门表中的部门编号相等,查询员工编号、员工名称和部门编号:)

(2)、左外连接

(3)、右外连接

(4)、满外连接


一、Group by 语句

(1)、计算emp表每个部门的平均工资

复制代码
select t.deptno,avg(t.sal) avg_ sal from emp t group by t.deptno;

(2)、计算emp表每个部门中每个岗位的最高工资

复制代码
select t.deptno, t.job,max(t.sal) max_sal from emp t group by t.deptno, t.job;

二、Having 语句

(1)、求每个部门的平均工资

复制代码
select deptno,avg(sal) from emp group by deptno;

(2)、求每个部门的平均工资大于22000的部门

复制代码
select deptno,avg(sal) avg_sal from emp group by deptno having avg_sal >2000;

三、Order by 语句

(1)、查询员工信息,按工资降序排列

复制代码
select * from emp order by sal desc;

(2)、按照部门和工资升序排序

复制代码
select ename, deptno, sal from emp order by deptno,sal;

四、Sort by语句

(1)、设置reduce个数

复制代码
set mapreduce.job.reduces=3;

(2)、查看设置reduce个数

复制代码
set mapreduce.job.reduces;

(3)、根据部门编号降序查看员工信息

复制代码
select * from emp sort by empno desc;

(4) 、将在询结果导入到文件中(按照部门编号降序排序)

复制代码
insert overwrite local directory '/root/sortby-result' select * from emp  sort by deptno desc;

五、Distribute by

六、Cluster by

以下两种写法等价:

复制代码
select * from emp cluster by deptno;
复制代码
select * from emp distribute by deptno sort by deptno;

七、Join 操作

(1) 、根据员工表和部门表中的部门编号相等,查询员工编号、员工名称和部门编号:

复制代码
select e.empno, e.ename,d.deptno,d.dname from emp e join dept d on e.deptno=d.deptno;

(2)、左外连接

Join操作符左边表中符合条件的所有记录将会被返回。

复制代码
select e.empno, e.ename,d.deptno,d.dname from emp e left join dept d on e.deptno=d.deptno;

(3)、右外连接

Join操作符右边表中符合条件的所有记录将会被返回。

复制代码
select e.empno, e.ename,d.deptno,d.dname from emp e right join dept d on e.deptno=d.deptno;

(4)、满外连接

返回所有表中符合条件的所有记录,如果任一-表的指定字段没有符合条件的值的话,那么就使用NULL值替代。

复制代码
select e.empno, e.ename,d.deptno,d.dname from emp e full join dept d on e.deptno=d.deptno;

在使用Join语句时,如果想限制输出结果,可以在Join语句后面添加Where语句,进行过滤。

复制代码
select e.empno, e.ename,d.deptno,d.dname from emp e full join dept d on e.deptno=d.deptno where d.deptno=20;

学习到这里就完结啦~不懂的宝子请私信哦!

相关推荐
expect7g1 小时前
Flink KeySelector
大数据·后端·flink
阿里云大数据AI技术17 小时前
StarRocks 助力数禾科技构建实时数仓:从数据孤岛到智能决策
大数据
Lx35221 小时前
Hadoop数据处理优化:减少Shuffle阶段的性能损耗
大数据·hadoop
武子康1 天前
大数据-99 Spark Streaming 数据源全面总结:原理、应用 文件流、Socket、RDD队列流
大数据·后端·spark
阿里云大数据AI技术2 天前
大数据公有云市场第一,阿里云占比47%!
大数据
Lx3522 天前
Hadoop容错机制深度解析:保障作业稳定运行
大数据·hadoop
T06205142 天前
工具变量-5G试点城市DID数据(2014-2025年
大数据
向往鹰的翱翔2 天前
BKY莱德因:5大黑科技逆转时光
大数据·人工智能·科技·生活·健康医疗
鸿乃江边鸟2 天前
向量化和列式存储
大数据·sql·向量化
IT毕设梦工厂2 天前
大数据毕业设计选题推荐-基于大数据的客户购物订单数据分析与可视化系统-Hadoop-Spark-数据可视化-BigData
大数据·hadoop·数据分析·spark·毕业设计·源码·bigdata