flume配置

flume配置

  1. 下载并解压到指定文件夹
shell 复制代码
tar -zxvf apache-flume-1.11.0-bin.tar.gz -C /opt/software/
  1. 进入Flume安装目录的conf目录,将flume-env.sh.template重命名为flume-env.sh,Java安装目录添加至flume-env.sh文件末尾。

    shell 复制代码
    # 更改文件名称
    mv flume-env.sh.template flume-env.sh
    # 将一下配置内容写入文件
    export JAVA_HOME=/usr/java/jdk1.8.0_281-amd64
  2. 删除Flume安装目录的lib目录下的guava-11.0.2.jar包,之后查看/etc/profile文件中的Hadoop安装目录,将Hadoop安装目录的/share/hadoop/common/lib/目录中的guava-27.0-jre.jar复制至Flume安装目录的lib目录。

    shell 复制代码
    # 进入文件夹中
    cd /opt/software/flume/lib
    # 删除
    rm -rf guava-11.0.2.jar
    # 进入文件夹
    cd /usr/local/hadoop-3.1.4/share/hadoop/common/lib
    # 复制到文件夹
    cp guava-27.0-jre.jar /opt/software/flume/lib/
  3. 在master节点的/etc/profile文件中配置Flume环境变量FLUME_HOME和PATH的值,并使配置文件立即生效,之后查看Flume版本,检测Flume是否安装成功。

    shell 复制代码
    # 配置环境变量
    vi /etc/profile
    # 添加文件内容
    export FLUME_HOME=/opt/software/flume
    export PATH=$PATH:$FLUME_HOEM/bin
    # 使环境变量生效
    source /etc/profile
    # 查看配置文件是否生效
    flume-ng

个人笔记:仅供参考如有错误望指正

相关推荐
原神启动12 小时前
云计算大数据——shell教程(三剑客之awk)
大数据·开发语言·perl
Hello.Reader3 小时前
Flink CDC 用 PolarDB-X CDC 实时同步数据到 Elasticsearch
大数据·elasticsearch·flink
说私域4 小时前
智能名片链动2+1模式S2B2C商城小程序:构建私域生态“留”量时代的新引擎
大数据·人工智能·小程序
paperxie_xiexuo5 小时前
如何高效完成科研数据的初步分析?深度体验PaperXie AI科研工具中数据分析模块在统计描述、可视化与方法推荐场景下的实际应用表现
大数据·数据库·人工智能·数据分析
武子康6 小时前
大数据-160 Apache Kylin Cube 实战:从建模到构建与查询(含踩坑与优化)
大数据·后端·apache kylin
非著名架构师6 小时前
智慧气象护航:构建陆海空立体交通气象安全保障体系
大数据·人工智能·安全·疾风气象大模型4.0·疾风气象大模型·风光功率预测
夏洛克信徒6 小时前
从 “工具” 到 “代理”:Gemini 3.0 重构 AI 能力边界,开启智能协作新纪元
大数据·人工智能·神经网络