物理机搭建单节点Flume

一 、安装flume

  1. Flume官网地址:http://flume.apache.org/
    文档查看地址:http://flume.apache.org/FlumeUserGuide.html
    下载地址:http://archive.apache.org/dist/flume/
  2. 安装
    将apache-flume-1.9.0-bin.tar.gz上传到linux的/opt/software目录下
  3. 解压apache-flume-1.9.0-bin.tar.gz到/opt/module/目录下
  4. 将lib文件夹下的guava-11.0.2.jar删除以兼容Hadoop 3.1.3

二、测试Flume

  1. 安装netcat工具,判断44444端口是否被占用,在flume目录下创建job文件夹并进入job文件夹。


  2. 在job/simpleCase文件夹下创建Flume Agent配置文件flume-1-netcat-logger.conf, 添加如下内容
  3. 部署运行flume监听端口

    注意:如果启动报错就把文件注释去掉
相关推荐
数字新视界2 小时前
机房动环监控提升运维效率
大数据·服务器·数据库·动环监控系统·动力与环境监控系统
SelectDB技术团队2 小时前
冷热分层从建到验:Storage Policy 创建、表级与分区级绑定、SHOW TABLETS 验证的完整命令
大数据·数据库·elasticsearch·搜索引擎·数据分析·apache doris·冷热分层
CALL158119098452 小时前
RoHS报告怎么做?测试项目、流程、费用与报告内容一文讲清
大数据
建筑工程企业管理系统3 小时前
工程进度统计管理系统自动化汇总数据,解决施工企业手工对账误差难题
大数据·人工智能·自动化
GOWIN革文品牌咨询4 小时前
工业测量品牌系统化搭建指南:从内容架构到长期治理的全流程
大数据·人工智能·架构
汇智信科4 小时前
汇智信科智联网关 | 多协议兼容,PLC设备一键上云
大数据·汇智信科
2601_967212724 小时前
安全型电源轨道系统合规选型技术指标与行业技术路线分析
大数据·经验分享·安全
派小心.4 小时前
小程序分享链路中来源参数的传递校验
大数据·前端·数据库·人工智能·小程序·数据分析
Sayai5 小时前
DataX 离线数据同步实战:Elasticsearch 数据批量导出 MySQL(作业配置、并发调优与定时同步平台化设计)
大数据·mysql·elasticsearch·datax·数据同步
171320330计算机毕设编程6 小时前
计算机毕业设计 基于YOLO改进算法的车辆特征识别系统设计与实现--lw
java·大数据·python·sql·算法