Ubuntu下部署Hadoop集群+Hive(一)

准备环境:3台Ubuntu服务器(版本20.04),自建的虚拟机也可以;推荐内存:8GB以上;部署也支持Ubuntu20.04以上版本,或是Centos也可以。

配置主机Host

在三台服务器上添加主机名与IP的映射,以方便在局域网内进行主机间的快速访问和后续的文件配置;

配置方法:

bash 复制代码
vi /etc/hosts

为方便配置:我的三台主机取名为HadoopMaster、HadoopSlave01、HadoopSlave02;配置完成后,其中HadoopMaster的配置如下图所示:

其它两台服务器也同样进行配置,后续,则可以使用名称替代Ip地址进行主机间的访问。

相关推荐
入 梦皆星河24 分钟前
在 Ubuntu/Debian 上安装 Go
ubuntu·golang·debian
IT果果日记1 小时前
ubuntu 安装 conda
linux·ubuntu·conda
Python私教1 小时前
ubuntu搭建k8s环境详细教程
linux·ubuntu·kubernetes
PersistJiao1 小时前
在 Spark RDD 中,sortBy 和 top 算子的各自适用场景
大数据·spark·top·sortby
2301_811274311 小时前
大数据基于Spring Boot的化妆品推荐系统的设计与实现
大数据·spring boot·后端
Yz98761 小时前
hive的存储格式
大数据·数据库·数据仓库·hive·hadoop·数据库开发
青云交1 小时前
大数据新视界 -- 大数据大厂之 Hive 数据导入:多源数据集成的策略与实战(上)(3/ 30)
大数据·数据清洗·电商数据·数据整合·hive 数据导入·多源数据·影视娱乐数据
lzhlizihang1 小时前
python如何使用spark操作hive
hive·python·spark
武子康2 小时前
大数据-230 离线数仓 - ODS层的构建 Hive处理 UDF 与 SerDe 处理 与 当前总结
java·大数据·数据仓库·hive·hadoop·sql·hdfs
武子康2 小时前
大数据-231 离线数仓 - DWS 层、ADS 层的创建 Hive 执行脚本
java·大数据·数据仓库·hive·hadoop·mysql