物理机搭建单节点Flume

一 、安装flume

  1. Flume官网地址:http://flume.apache.org/
    文档查看地址:http://flume.apache.org/FlumeUserGuide.html
    下载地址:http://archive.apache.org/dist/flume/
  2. 安装
    将apache-flume-1.9.0-bin.tar.gz上传到linux的/opt/software目录下
  3. 解压apache-flume-1.9.0-bin.tar.gz到/opt/module/目录下
  4. 将lib文件夹下的guava-11.0.2.jar删除以兼容Hadoop 3.1.3

二、测试Flume

  1. 安装netcat工具,判断44444端口是否被占用,在flume目录下创建job文件夹并进入job文件夹。


  2. 在job/simpleCase文件夹下创建Flume Agent配置文件flume-1-netcat-logger.conf, 添加如下内容
  3. 部署运行flume监听端口

    注意:如果启动报错就把文件注释去掉
相关推荐
大大大大晴天2 天前
Hudi Metadata Table 与 Hive Sync (HMS)怎么选?
大数据
手可摘星辰7772 天前
一次线上FlinkCDC异常排查复盘
大数据·flink
大大大大晴天2 天前
Hudi技术内幕:Metadata Table原理与实践
大数据
大大大大晴天3 天前
Hudi技术内幕:深入解析Index索引机制
大数据
阿里云大数据AI技术3 天前
Flink Forward Asia 2026 深圳启幕:Agentic Streaming for AI,开启实时智能新范式
大数据·flink
SelectDB4 天前
阶跃星辰基于 SelectDB 构建 PB 级 Agent 可观测平台
大数据·数据库·aigc
大大大大晴天7 天前
Hudi技术内幕:RecordPayload到RecordMerger
大数据
SelectDB8 天前
秒级弹性、最高降本 70%:SelectDB Serverless 如何重塑云数仓资源效率
大数据·后端·云原生
WhoAmI8 天前
MapReduce框架原理解析一:InputFormat
大数据·hadoop
WhoAmI8 天前
MapReduce框架原理解析三:OutputFormat
大数据·hadoop