物理机搭建单节点Flume

一 、安装flume

  1. Flume官网地址:http://flume.apache.org/
    文档查看地址:http://flume.apache.org/FlumeUserGuide.html
    下载地址:http://archive.apache.org/dist/flume/
  2. 安装
    将apache-flume-1.9.0-bin.tar.gz上传到linux的/opt/software目录下
  3. 解压apache-flume-1.9.0-bin.tar.gz到/opt/module/目录下
  4. 将lib文件夹下的guava-11.0.2.jar删除以兼容Hadoop 3.1.3

二、测试Flume

  1. 安装netcat工具,判断44444端口是否被占用,在flume目录下创建job文件夹并进入job文件夹。


  2. 在job/simpleCase文件夹下创建Flume Agent配置文件flume-1-netcat-logger.conf, 添加如下内容
  3. 部署运行flume监听端口

    注意:如果启动报错就把文件注释去掉
相关推荐
G皮T2 分钟前
【Elasticsearch】映射:null_value 详解
大数据·elasticsearch·搜索引擎·映射·mappings·null_value
大霸王龙1 小时前
软件工程的软件生命周期通常分为以下主要阶段
大数据·人工智能·旅游
点赋科技2 小时前
沙市区举办资本市场赋能培训会 点赋科技分享智能消费新实践
大数据·人工智能
YSGZJJ2 小时前
股指期货技术分析与短线操作方法介绍
大数据·人工智能
Doker 多克2 小时前
Flink CDC —部署模式
大数据·flink
Guheyunyi2 小时前
监测预警系统重塑隧道安全新范式
大数据·运维·人工智能·科技·安全
Channing Lewis3 小时前
如果科技足够发达,是否还需要维持自然系统(例如生物多样性)中那种‘冗余’和‘多样性’,还是可以只保留最优解?
大数据·人工智能·科技
禺垣3 小时前
区块链技术概述
大数据·人工智能·分布式·物联网·去中心化·区块链
IvanCodes4 小时前
七、Sqoop Job:简化与自动化数据迁移任务及免密执行
大数据·数据库·hadoop·sqoop