Flum--环境搭建实验

1.解压flum安装包

解压到/opt/module下:

bash 复制代码
tar -zxvf /opt/software/apache-flume-1.9.0-bin.tar.gz -C /opt/module/

2.修改flum名字:

bash 复制代码
mv /opt/module/apache-flume-1.9.0-bin /opt/module/flume

3.将lib文件夹下的guava-11.0.2.jar删除以兼容Hadoop 3.1.3

bash 复制代码
rm /opt/module/flume/lib/guava-11.0.2.jar

4.修改conf下的log4j.properties确定日志打印的位置

#console表示同时将日志输出到控制台

flume.root.logger=INFO,LOGFILE,console

#固定日志输出的位置

flume.log.dir=/opt/module/flume/logs

#日志文件的名称

flume.log.file=flume.log

  1. flume-ng agent -n agentName -f confFile:启动 Flume,其中 agentName 为你指定的 agent 名称,confFile 为你所编写的 Flume 配置文件。

  2. flume-ng agent -n agentName -f confFile -Dflume.root.logger=DEBUG,console:以调试模式启动 Flume,将日志输出到控制台。

  3. flume-ng version:查看当前安装的 Flume 版本。

  4. flume-ng help:查看 Flume 命令帮助。

相关推荐
论文复现现场7 分钟前
企业知识库 RAG 用什么模型便宜?GLM-5.3-Flash 长文本 API 实测
python·rag·企业知识库·大模型api·glm-5.3-flash
梦在远山后29 分钟前
从手写 Loop 到可恢复 Runtime:用 LangGraph、PostgreSQL Checkpoint 与 AG-UI 跑通中断恢复
python·langchain·agent
Yolanda_20221 小时前
8.tensorboard的使用
python
用户0332126663671 小时前
使用 Python 添加、隐藏或删除 PowerPoint 幻灯片
python
言乐61 小时前
Python关键词抓取目标网站
python·django·virtualenv·pygame·tornado
用户7783366132111 小时前
搜索页的 URL 状态管理:可分享、可回退、可刷新
python·api
Liaiyang662 小时前
空圈容错视角下的无人机全链路审计:从理论框架到耦合式检验
人工智能·pytorch·python·深度学习·系统架构·自动驾驶·无人机
liuchangng2 小时前
Jev 模型研究:从生成式大模型到决策式模型——System One、RLCD 校准与采用边界
java·javascript·人工智能·python·深度学习
微小冷2 小时前
patsy:Python中的统计建模语法
python·统计·建模·patsy·statmodels
我是神62 小时前
抖音直播QQ估价直播软件exe详解
python·tkinter·qq评估