flume配置

flume配置

  1. 下载并解压到指定文件夹
shell 复制代码
tar -zxvf apache-flume-1.11.0-bin.tar.gz -C /opt/software/
  1. 进入Flume安装目录的conf目录,将flume-env.sh.template重命名为flume-env.sh,Java安装目录添加至flume-env.sh文件末尾。

    shell 复制代码
    # 更改文件名称
    mv flume-env.sh.template flume-env.sh
    # 将一下配置内容写入文件
    export JAVA_HOME=/usr/java/jdk1.8.0_281-amd64
  2. 删除Flume安装目录的lib目录下的guava-11.0.2.jar包,之后查看/etc/profile文件中的Hadoop安装目录,将Hadoop安装目录的/share/hadoop/common/lib/目录中的guava-27.0-jre.jar复制至Flume安装目录的lib目录。

    shell 复制代码
    # 进入文件夹中
    cd /opt/software/flume/lib
    # 删除
    rm -rf guava-11.0.2.jar
    # 进入文件夹
    cd /usr/local/hadoop-3.1.4/share/hadoop/common/lib
    # 复制到文件夹
    cp guava-27.0-jre.jar /opt/software/flume/lib/
  3. 在master节点的/etc/profile文件中配置Flume环境变量FLUME_HOME和PATH的值,并使配置文件立即生效,之后查看Flume版本,检测Flume是否安装成功。

    shell 复制代码
    # 配置环境变量
    vi /etc/profile
    # 添加文件内容
    export FLUME_HOME=/opt/software/flume
    export PATH=$PATH:$FLUME_HOEM/bin
    # 使环境变量生效
    source /etc/profile
    # 查看配置文件是否生效
    flume-ng

个人笔记:仅供参考如有错误望指正

相关推荐
新诺韦尔API17 分钟前
手机三要素验证不通过的原因?
大数据·智能手机·api
成长之路51428 分钟前
【数据集】分地市全社会用电量统计数据(2004-2022年)
大数据
InfiSight智睿视界40 分钟前
门店智能体技术如何破解美容美发连锁的“标准执行困境”
大数据·运维·人工智能
Python_Study20252 小时前
制造业数据采集系统选型指南:从技术挑战到架构实践
大数据·网络·数据结构·人工智能·架构
Cx330❀2 小时前
Git 多人协作全攻略:从入门到高效协同
大数据·elasticsearch·搜索引擎·gitee·github·全文检索·gitcode
Tob管理笔记3 小时前
建筑业如何精准开拓优质客户?技术驱动下的方法论与实践
大数据·云计算·数据库开发
MM_MS3 小时前
Halcon控制语句
java·大数据·前端·数据库·人工智能·算法·视觉检测
JZC_xiaozhong3 小时前
主数据同步失效引发的业务风险与集成架构治理
大数据·架构·数据一致性·mdm·主数据管理·数据孤岛解决方案·数据集成与应用集成
T06205144 小时前
【数据集】全国各地区教育139个相关指标数据集(2000-2024年)
大数据
故乡de云4 小时前
Vertex AI 企业账号体系,Google Cloud 才能完整支撑
大数据·人工智能