八、安装 Hadoop

安装 Hadoop

(1)将 Hadoop 软件包上传到虚拟机的 /opt/software 目录中
  • Apache 官方镜像站地址:
md-end-block 复制代码
https://archive.apache.org/dist/hadoop/common/hadoop-3.2.1/

可直接用命令下载到对应的目录文件夹中:

md-end-block 复制代码
sudo wget -P /opt/software https://archive.apache.org/dist/hadoop/common/hadoop-3.2.1/hadoop-3.2.1.tar.gz
  • 阿里云镜像地址:
md-end-block 复制代码
https://mirrors.aliyun.com/apache/hadoop/common
  • 清华源镜像地址:
md-end-block 复制代码
https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/
(2)在 /opt/software 目录中查看软件包是否导入成功
md-end-block 复制代码
ls -al /opt/software
(3)将 Hadoop 软件包解压到 /opt/module 目录下
md-end-block 复制代码
tar -zxvf /opt/software/hadoop-3.2.1.tar.gz -C /opt/module
(4)确认解压是否成功
md-end-block 复制代码
ls -al /opt/module
(5)配置 Hadoop 环境变量
bash 复制代码
vim /etc/profile.d/my_env.sh
  • 在 my_env.sh 文本末尾添加如下内容(Shift+G):
bash 复制代码
# HADOOP_HOME
export HADOOP_HOME=/opt/module/hadoop-3.2.1
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin
  • 让新的环境变量PATH生效:
bash 复制代码
source /etc/profile
(6)测试 Hadoop 是否安装成功
bash 复制代码
hadoop version
相关推荐
H3C-Navigator6 小时前
RPC在分布式存储系统中的应用
分布式·网络协议·rpc
李慕婉学姐7 小时前
【开题答辩过程】以《分布式菌菇销售系统》为例,不会开题答辩的可以进来看看
分布式
毕设源码-郭学长9 小时前
【开题答辩全过程】以 Python基于大数据的四川旅游景点数据分析与可视化为例,包含答辩的问题和答案
大数据·python·数据分析
顧棟9 小时前
【HDFS实战】HADOOP 机架感知能力-HDFS
大数据·hadoop·hdfs
亚林瓜子10 小时前
AWS中国云中的ETL之从aurora搬数据到s3(Glue版)
hadoop·spark·云计算·etl·aws
Hello.Reader10 小时前
Kafka 安全性认证、加密、授权与落地最佳实践
分布式·kafka
程序员果子12 小时前
Kafka 深度剖析:架构演进、核心概念与设计精髓
大数据·运维·分布式·中间件·架构·kafka
isfox12 小时前
Hadoop RPC深度解析:分布式通信的核心机制
大数据
神仙别闹13 小时前
基于Go语言实现分布式类地球模拟系统
分布式