Flum--环境搭建实验

1.解压flum安装包

解压到/opt/module下:

bash 复制代码
tar -zxvf /opt/software/apache-flume-1.9.0-bin.tar.gz -C /opt/module/

2.修改flum名字:

bash 复制代码
mv /opt/module/apache-flume-1.9.0-bin /opt/module/flume

3.将lib文件夹下的guava-11.0.2.jar删除以兼容Hadoop 3.1.3

bash 复制代码
rm /opt/module/flume/lib/guava-11.0.2.jar

4.修改conf下的log4j.properties确定日志打印的位置

#console表示同时将日志输出到控制台

flume.root.logger=INFO,LOGFILE,console

#固定日志输出的位置

flume.log.dir=/opt/module/flume/logs

#日志文件的名称

flume.log.file=flume.log

  1. flume-ng agent -n agentName -f confFile:启动 Flume,其中 agentName 为你指定的 agent 名称,confFile 为你所编写的 Flume 配置文件。

  2. flume-ng agent -n agentName -f confFile -Dflume.root.logger=DEBUG,console:以调试模式启动 Flume,将日志输出到控制台。

  3. flume-ng version:查看当前安装的 Flume 版本。

  4. flume-ng help:查看 Flume 命令帮助。

相关推荐
lixin55655632 分钟前
基于神经网络的音乐生成增强器
java·人工智能·pytorch·python·深度学习·语言模型
养海绵宝宝的小蜗33 分钟前
Python第二次作业
开发语言·python
我的xiaodoujiao35 分钟前
使用 Python 语言 从 0 到 1 搭建完整 Web UI自动化测试学习系列 43--添加allure测试报告显示信息和其他封装方法
python·学习·测试工具·allure
无垠的广袤36 分钟前
【CPKCOR-RA8D1】RUHMI 转换 AI 模型
人工智能·python·嵌入式硬件·开发板
aiguangyuan40 分钟前
从词袋到TF-IDF:sklearn文本特征工程实战指南
人工智能·python·nlp
数据知道1 小时前
PostgreSQL 实战:详解 UPSERT(INSERT ON CONFLICT)
数据库·python·postgresql
June bug1 小时前
(#数组/链表操作)寻找两个正序数组的中位数
数据结构·python·算法·leetcode·面试·职场和发展·跳槽
李昊哲小课1 小时前
奶茶店销售额预测模型
python·机器学习·线性回归·scikit-learn
电商API&Tina1 小时前
电商API接口的应用与简要分析||taobao|jd|微店
大数据·python·数据分析·json
向前V1 小时前
Flutter for OpenHarmony轻量级开源记事本App实战:笔记编辑器
开发语言·笔记·python·flutter·游戏·开源·编辑器