Flume 安装与部署

目录

Flume 下载地址

(1)将 apache-flume-1.9.0-bin.tar.gz 上传到 linux 的 /opt/software 目录下

(2)解压 apache-flume-1.9.0-bin.tar.gz/opt/module/ 目录下

powershell 复制代码
huwei@hadoop101 ~]$ tar -zxvf /opt/software/apache-flume-1.9.0-bin.tar.gz -C /opt/module/

(3)修改 apache-flume-1.9.0-bin 的名称为 flume-1.9.0

powershell 复制代码
huwei@hadoop101 ~]$ cd /opt/module
[huwei@hadoop101 module]$ mv apache-flume-1.9.0-bin/ flume-1.9.0

(4)配置环境变量

powershell 复制代码
[huwei@hadoop101 module]$ sudo vim /etc/profile.d/my_env.sh

添加如下内容

复制代码
# Flume
export FLUME_HOME=/opt/module/flume-1.9.0
export PATH=$PATH:$FLUME_HOME/bin

保存退出,使环境变量生效

powershell 复制代码
[huwei@hadoop101 module]$ source /etc/profile

(5)将lib文件夹下的 guava-11.0.2.jar 删除以兼容Hadoop 3.1.3

由于前面 大数据技术学习笔记(二)------ Hadoop 运行环境的搭建,我安装的 Hadoop 版本是 3.1.3 ,这与 guava-11.0.2.jar 版本不兼容,删除以避免后续报错。

虽然删除了。但是这并不影响 Flume 的运行,因为系统会自动找到 Hadoop 中自带的兼容版本的 guava jar包。

powershell 复制代码
[huwei@hadoop101 lib]$ cd /opt/module/flume-1.9.0/lib/
[huwei@hadoop101 lib]$ rm guava-11.0.2.jar
相关推荐
黄焖鸡能干四碗3 小时前
固定资产管理系统建设方案和源码(Java源码)
大数据·数据库·人工智能·物联网·区块链
EAIReport3 小时前
Agent开发+Vibe Coding:数据本体论筑牢AI开发效率与可靠性双防线
大数据·人工智能
2601_957787584 小时前
企业级内容矩阵的安全合规体系构建与技术实现
大数据·安全·矩阵
百胜软件@百胜软件7 小时前
破局存量时代:消费电子品牌的数字化突围与增长密码
大数据·零售数字化·数智中台·珠宝行业
小王毕业啦7 小时前
2009-2025年 华证ESG年度季度评级评分数据 xlsx
大数据·人工智能·数据挖掘·数据分析·社科数据·实证分析·经管数据
_codemonster7 小时前
系统分析师案例刷题(五)系统分析、系统设计和需求工程
大数据
2601_957787587 小时前
数据驱动的多平台内容矩阵运营效果分析与闭环优化技术
大数据·人工智能·矩阵
189228048617 小时前
NV265固态MT29F32T08GSLBHL8-24QMES:B
大数据·服务器·人工智能·科技·缓存
一切皆是因缘际会8 小时前
AI技术新风口:边缘计算与智能体协同,解锁产业落地新范式
大数据·人工智能·安全·ai·架构·语音识别
znhb999 小时前
从分治到协同:一体化联合脱硫脱硝的技术逻辑与实践路径
大数据