八、安装 Hadoop

安装 Hadoop

(1)将 Hadoop 软件包上传到虚拟机的 /opt/software 目录中
  • Apache 官方镜像站地址:
md-end-block 复制代码
https://archive.apache.org/dist/hadoop/common/hadoop-3.2.1/

可直接用命令下载到对应的目录文件夹中:

md-end-block 复制代码
sudo wget -P /opt/software https://archive.apache.org/dist/hadoop/common/hadoop-3.2.1/hadoop-3.2.1.tar.gz
  • 阿里云镜像地址:
md-end-block 复制代码
https://mirrors.aliyun.com/apache/hadoop/common
  • 清华源镜像地址:
md-end-block 复制代码
https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/
(2)在 /opt/software 目录中查看软件包是否导入成功
md-end-block 复制代码
ls -al /opt/software
(3)将 Hadoop 软件包解压到 /opt/module 目录下
md-end-block 复制代码
tar -zxvf /opt/software/hadoop-3.2.1.tar.gz -C /opt/module
(4)确认解压是否成功
md-end-block 复制代码
ls -al /opt/module
(5)配置 Hadoop 环境变量
bash 复制代码
vim /etc/profile.d/my_env.sh
  • 在 my_env.sh 文本末尾添加如下内容(Shift+G):
bash 复制代码
# HADOOP_HOME
export HADOOP_HOME=/opt/module/hadoop-3.2.1
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin
  • 让新的环境变量PATH生效:
bash 复制代码
source /etc/profile
(6)测试 Hadoop 是否安装成功
bash 复制代码
hadoop version
相关推荐
TMT星球6 分钟前
TCL华星t8项目正式开工,总投资额约295亿元
大数据·人工智能
阿里云大数据AI技术12 分钟前
云栖实录 | 驶入智驾深水区:广汽的“数据突围“之路
大数据·人工智能
B站_计算机毕业设计之家23 分钟前
python股票交易数据管理系统 金融数据 分析可视化 Django框架 爬虫技术 大数据技术 Hadoop spark(源码)✅
大数据·hadoop·python·金融·spark·股票·推荐算法
腾讯云开发者1 小时前
太古可口可乐的数智跃迁:用 AI 重构快消渠道的“最后一公里”
大数据
GIS数据转换器2 小时前
2025无人机在农业生态中的应用实践
大数据·网络·人工智能·安全·无人机
武子康2 小时前
大数据-132 Flink SQL 实战入门 | 3 分钟跑通 Table API + SQL 含 toChangelogStream 新写法
大数据·后端·flink
Lion Long2 小时前
PB级数据洪流下的抉择:从大数据架构师视角,深度解析时序数据库选型与性能优化(聚焦Apache IoTDB)
大数据·性能优化·apache·时序数据库·iotdb
Lx3523 小时前
Flink背压机制:原理与调优策略
大数据
Lx3523 小时前
Flink容错机制:Checkpoint和Savepoint深入解析
大数据
QQ5416451213 小时前
【小增长电商软件分享】微信私域淘宝电商补单/做基础销量:如何有效控制粉丝错货、复购、订单插旗及客服转账返款等常见痛点|粉丝订单管理|电商鱼塘运营方案
大数据·电商私域粉丝管理·电商私域运营系统解决方案·粉丝订单关系系统