Flum--环境搭建实验

1.解压flum安装包

解压到/opt/module下:

bash 复制代码
tar -zxvf /opt/software/apache-flume-1.9.0-bin.tar.gz -C /opt/module/

2.修改flum名字:

bash 复制代码
mv /opt/module/apache-flume-1.9.0-bin /opt/module/flume

3.将lib文件夹下的guava-11.0.2.jar删除以兼容Hadoop 3.1.3

bash 复制代码
rm /opt/module/flume/lib/guava-11.0.2.jar

4.修改conf下的log4j.properties确定日志打印的位置

#console表示同时将日志输出到控制台

flume.root.logger=INFO,LOGFILE,console

#固定日志输出的位置

flume.log.dir=/opt/module/flume/logs

#日志文件的名称

flume.log.file=flume.log

  1. flume-ng agent -n agentName -f confFile:启动 Flume,其中 agentName 为你指定的 agent 名称,confFile 为你所编写的 Flume 配置文件。

  2. flume-ng agent -n agentName -f confFile -Dflume.root.logger=DEBUG,console:以调试模式启动 Flume,将日志输出到控制台。

  3. flume-ng version:查看当前安装的 Flume 版本。

  4. flume-ng help:查看 Flume 命令帮助。

相关推荐
用户8356290780512 分钟前
用 Python 轻松在 Excel 工作表中应用条件格式
后端·python
red1giant_star6 分钟前
Python根据文件后缀统计文件大小、找出文件位置(仿Everything)
后端·python
雷欧力18 分钟前
如何使用 Claude API?3 种接入方案实测,附完整代码(2026)
python·claude
神仙别闹23 分钟前
基于 Python 实现 BERT 的情感分析模型
开发语言·python·bert
NQBJT30 分钟前
VS Code配置Python人工智能开发环境
开发语言·人工智能·vscode·python
浮游本尊31 分钟前
一文讲透巡检链路:采集程序 → 上传数据包 → 后端解析入库 → 分析出报告
python
a1117761 小时前
MonoGS 在 Jetson Orin Nano 上的部署与性能测试
python·开源·torch·cv
偶尔微微一笑1 小时前
智能体四大核心模块揭秘
python
2301_815901971 小时前
SQL如何将多行记录聚合成逗号分隔字符串_GROUP_CONCAT技巧
jvm·数据库·python
西索斯1 小时前
Claude API 报 529 Overloaded 怎么办?3 种方案实测,最后一种最省心
python·claude