物理机搭建单节点Flume

一 、安装flume

  1. Flume官网地址:http://flume.apache.org/
    文档查看地址:http://flume.apache.org/FlumeUserGuide.html
    下载地址:http://archive.apache.org/dist/flume/
  2. 安装
    将apache-flume-1.9.0-bin.tar.gz上传到linux的/opt/software目录下
  3. 解压apache-flume-1.9.0-bin.tar.gz到/opt/module/目录下
  4. 将lib文件夹下的guava-11.0.2.jar删除以兼容Hadoop 3.1.3

二、测试Flume

  1. 安装netcat工具,判断44444端口是否被占用,在flume目录下创建job文件夹并进入job文件夹。


  2. 在job/simpleCase文件夹下创建Flume Agent配置文件flume-1-netcat-logger.conf, 添加如下内容
  3. 部署运行flume监听端口

    注意:如果启动报错就把文件注释去掉
相关推荐
B站_计算机毕业设计之家1 小时前
计算机毕业设计:Python农业数据可视化分析系统 气象数据 农业生产 粮食数据 播种数据 爬虫 Django框架 天气数据 降水量(源码+文档)✅
大数据·爬虫·python·机器学习·信息可视化·课程设计·农业
Apache Flink3 小时前
Flink Agents 0.1.0 发布公告
大数据·flink
潘达斯奈基~4 小时前
在使用spark的applyInPandas方法过程中,遇到类型冲突问题如何解决
大数据·笔记
火星资讯5 小时前
腾多多数字零售模式:从成本转嫁到全生态共赢的破局实践
大数据
望获linux6 小时前
【实时Linux实战系列】实时 Linux 的自动化基准测试框架
java·大数据·linux·运维·网络·elasticsearch·搜索引擎
金宗汉7 小时前
《宇宙递归拓扑学:基于自指性与拓扑流形的无限逼近模型》
大数据·人工智能·笔记·算法·观察者模式
直有两条腿7 小时前
【数据迁移】HBase Bulkload批量加载原理
大数据·数据库·hbase
Joy T7 小时前
海南蓝碳:生态财富与科技驱动的新未来
大数据·人工智能·红树林·海南省·生态区建设
风清再凯7 小时前
01-ELK安装ES,ES-head
大数据·elk·elasticsearch
Guheyunyi8 小时前
风险感知中枢:监测预警系统的架构与核心
大数据·运维·安全·重构·架构·自动化