Flum--环境搭建实验

1.解压flum安装包

解压到/opt/module下:

bash 复制代码
tar -zxvf /opt/software/apache-flume-1.9.0-bin.tar.gz -C /opt/module/

2.修改flum名字:

bash 复制代码
mv /opt/module/apache-flume-1.9.0-bin /opt/module/flume

3.将lib文件夹下的guava-11.0.2.jar删除以兼容Hadoop 3.1.3

bash 复制代码
rm /opt/module/flume/lib/guava-11.0.2.jar

4.修改conf下的log4j.properties确定日志打印的位置

#console表示同时将日志输出到控制台

flume.root.logger=INFO,LOGFILE,console

#固定日志输出的位置

flume.log.dir=/opt/module/flume/logs

#日志文件的名称

flume.log.file=flume.log

  1. flume-ng agent -n agentName -f confFile:启动 Flume,其中 agentName 为你指定的 agent 名称,confFile 为你所编写的 Flume 配置文件。

  2. flume-ng agent -n agentName -f confFile -Dflume.root.logger=DEBUG,console:以调试模式启动 Flume,将日志输出到控制台。

  3. flume-ng version:查看当前安装的 Flume 版本。

  4. flume-ng help:查看 Flume 命令帮助。

相关推荐
树獭非懒1 天前
AI大模型小白手册|Embedding 与向量数据库
后端·python·llm
唐叔在学习1 天前
就算没有服务器,我照样能够同步数据
后端·python·程序员
曲幽1 天前
FastAPI流式输出实战与避坑指南:让AI像人一样“边想边说”
python·ai·fastapi·web·stream·chat·async·generator·ollama
Flittly1 天前
【从零手写 AI Agent:learn-claude-code 项目实战笔记】(1)The Agent Loop (智能体循环)
python·agent
vivo互联网技术1 天前
ICLR2026 | 视频虚化新突破!Any-to-Bokeh 一键生成电影感连贯效果
人工智能·python·深度学习
敏编程1 天前
一天一个Python库:virtualenv - 隔离你的Python环境,保持项目整洁
python
喝茶与编码1 天前
Python异步并发控制:asyncio.gather 与 Semaphore 协同设计解析
后端·python
zone77391 天前
003:RAG 入门-LangChain 读取图片数据
后端·python·面试
用户8356290780511 天前
在 PowerPoint 中用 Python 添加和定制形状的完整教程
后端·python