物理机搭建单节点Flume

一 、安装flume

  1. Flume官网地址:http://flume.apache.org/
    文档查看地址:http://flume.apache.org/FlumeUserGuide.html
    下载地址:http://archive.apache.org/dist/flume/
  2. 安装
    将apache-flume-1.9.0-bin.tar.gz上传到linux的/opt/software目录下
  3. 解压apache-flume-1.9.0-bin.tar.gz到/opt/module/目录下
  4. 将lib文件夹下的guava-11.0.2.jar删除以兼容Hadoop 3.1.3

二、测试Flume

  1. 安装netcat工具,判断44444端口是否被占用,在flume目录下创建job文件夹并进入job文件夹。


  2. 在job/simpleCase文件夹下创建Flume Agent配置文件flume-1-netcat-logger.conf, 添加如下内容
  3. 部署运行flume监听端口

    注意:如果启动报错就把文件注释去掉
相关推荐
2503_931712482 小时前
国内广东乐运科技及行业头部AI数字化转型解决方案源头
大数据
学着改变2752 小时前
手持式超声波流量计为何首选行澳科技?便携巡检与外夹计量的性能标杆
大数据·网络·人工智能·科技·产品运营·量子计算
xushichang123_3 小时前
企业想统一接入 Claude、GPT、DeepSeek、Qwen 等模型,应该选什么云上 AI 平台架构?
大数据
赟爸5 小时前
直播切片素材杂乱不好复用,易元AI要怎么处理
大数据·人工智能·python
yunlaodacom5 小时前
阿里云国际站注册:性能损耗 < 1%!基于 eBPF 的服务器异常预测实战与调优指南
大数据·服务器·阿里云
大大大大晴天5 小时前
从 Kafka 到报表:Flink、CDC 与 StarRocks 的实时入仓链路
大数据
qq_454245035 小时前
Agent数据价值分类存储原则
大数据·人工智能·分类
画中有画7 小时前
Kappa 架构在大数据实时处理系统中的应用
大数据·架构
yingyuecom8 小时前
Hi,导演:AI视频创作正在从“模型调用”走向“生产工作流”
大数据·人工智能
阿标在干嘛9 小时前
从数据碎片到决策引擎:政策快报背后的政策大数据架构逻辑
大数据·架构