Flume 安装与部署

目录

Flume 下载地址

(1)将 apache-flume-1.9.0-bin.tar.gz 上传到 linux 的 /opt/software 目录下

(2)解压 apache-flume-1.9.0-bin.tar.gz/opt/module/ 目录下

powershell 复制代码
huwei@hadoop101 ~]$ tar -zxvf /opt/software/apache-flume-1.9.0-bin.tar.gz -C /opt/module/

(3)修改 apache-flume-1.9.0-bin 的名称为 flume-1.9.0

powershell 复制代码
huwei@hadoop101 ~]$ cd /opt/module
[huwei@hadoop101 module]$ mv apache-flume-1.9.0-bin/ flume-1.9.0

(4)配置环境变量

powershell 复制代码
[huwei@hadoop101 module]$ sudo vim /etc/profile.d/my_env.sh

添加如下内容

复制代码
# Flume
export FLUME_HOME=/opt/module/flume-1.9.0
export PATH=$PATH:$FLUME_HOME/bin

保存退出,使环境变量生效

powershell 复制代码
[huwei@hadoop101 module]$ source /etc/profile

(5)将lib文件夹下的 guava-11.0.2.jar 删除以兼容Hadoop 3.1.3

由于前面 大数据技术学习笔记(二)------ Hadoop 运行环境的搭建,我安装的 Hadoop 版本是 3.1.3 ,这与 guava-11.0.2.jar 版本不兼容,删除以避免后续报错。

虽然删除了。但是这并不影响 Flume 的运行,因为系统会自动找到 Hadoop 中自带的兼容版本的 guava jar包。

powershell 复制代码
[huwei@hadoop101 lib]$ cd /opt/module/flume-1.9.0/lib/
[huwei@hadoop101 lib]$ rm guava-11.0.2.jar
相关推荐
科技发布16 分钟前
传播易整合商圈媒体,商场停车场灯箱广告高效落地
大数据·人工智能·媒体
MindUp41 分钟前
大模型在命理排盘场景下的多平台功能对比与工程化思考
大数据·人工智能
小刘快学习1 小时前
印刷包装企业的工艺问答与报价,为什么从直连模型改成了聚合网关
大数据·人工智能
大模型探索者1 小时前
2026零售与电子商务大模型训推平台选型指南:大促高并发与极致算力降本破局
大数据·人工智能·零售
WA内核拾荒者1 小时前
WhatsApp账号运营SOP的可视化编排与流水线监控
大数据·数据库·windows
楷哥爱开发1 小时前
目标国家 IP 会影响 TikTok、Instagram 的内容分发和受众地区吗?
大数据·运维·tcp/ip
南京云森杉木桩2 小时前
水利木桩源头直供,质量可靠价格更优
大数据·python
CIO_Alliance2 小时前
AI算法系列(2)| 决策树与随机森林XGBoost:企业AI化转型中的树模型选型逻辑
大数据·人工智能·算法·决策树·系统集成·企业cio联盟·企业级ai化转型
数据智研2 小时前
【数据分享】陕西区域统计年鉴(2012-2018)
大数据·人工智能·信息可视化·数据分析
AI大法师2 小时前
品牌焕新不只换 Logo:捷豹案例里的触点重构方法
大数据·人工智能·设计模式·新媒体运营