八、安装 Hadoop

安装 Hadoop

(1)将 Hadoop 软件包上传到虚拟机的 /opt/software 目录中
  • Apache 官方镜像站地址:
md-end-block 复制代码
https://archive.apache.org/dist/hadoop/common/hadoop-3.2.1/

可直接用命令下载到对应的目录文件夹中:

md-end-block 复制代码
sudo wget -P /opt/software https://archive.apache.org/dist/hadoop/common/hadoop-3.2.1/hadoop-3.2.1.tar.gz
  • 阿里云镜像地址:
md-end-block 复制代码
https://mirrors.aliyun.com/apache/hadoop/common
  • 清华源镜像地址:
md-end-block 复制代码
https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/
(2)在 /opt/software 目录中查看软件包是否导入成功
md-end-block 复制代码
ls -al /opt/software
(3)将 Hadoop 软件包解压到 /opt/module 目录下
md-end-block 复制代码
tar -zxvf /opt/software/hadoop-3.2.1.tar.gz -C /opt/module
(4)确认解压是否成功
md-end-block 复制代码
ls -al /opt/module
(5)配置 Hadoop 环境变量
bash 复制代码
vim /etc/profile.d/my_env.sh
  • 在 my_env.sh 文本末尾添加如下内容(Shift+G):
bash 复制代码
# HADOOP_HOME
export HADOOP_HOME=/opt/module/hadoop-3.2.1
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin
  • 让新的环境变量PATH生效:
bash 复制代码
source /etc/profile
(6)测试 Hadoop 是否安装成功
bash 复制代码
hadoop version
相关推荐
Elastic 中国社区官方博客10 分钟前
Elastic 和 Cursor 合作 加速 上下文工程 与 coding agents
大数据·人工智能·elasticsearch·搜索引擎·全文检索
lzhdim30 分钟前
SQL 入门 12:SQL 视图:创建、修改与可更新视图
java·大数据·服务器·数据库·sql
科研前沿42 分钟前
镜像孪生VS视频孪生核心技术产品核心优势
大数据·人工智能·算法·重构·空间计算
lizhihai_992 小时前
股市学习心得-六张分时保命图
大数据·人工智能·学习
渣渣盟2 小时前
Flink 流处理那些事儿:状态、时间与容错
大数据·flink
CS创新实验室3 小时前
CS实验室行业报告:生物医药与生物工程行业就业分析报告
大数据·人工智能·生物医药
身如柳絮随风扬4 小时前
多数据源切换实战:从业务场景到3种实现方案全解析
java·分布式·微服务
隐于花海,等待花开5 小时前
40.RAND 函数深度解析
hive·hadoop
无忧智库5 小时前
跨行业数据要素可信流通体系建设:打破信任壁垒的完整工程方法论(WORD)
大数据·人工智能
小王毕业啦5 小时前
2007-2024年 省级-农林牧渔总产值、农业总产值数据(xlsx)
大数据·人工智能·数据挖掘·数据分析·社科数据·实证分析·经管数据