Hudi集成Flink

Hudi集成Flink

Hudi版本：0.15.0
Flink版本：1.17.2

目录

• Hudi集成Flink
• [1. 准备工作](#1. 准备工作)

1. 准备工作

1. 拷贝编译好的jar包到Flink的lib目录下

   cp /opt/module/hudi-0.15.0/packaging/hudi-flink-bundle/target/hudi-flink1.17-bundle-0.15.0.jar /opt/module/flink-1.17.2/lib/

2. 拷贝guava包，解决依赖冲突

   cp /opt/module/hadoop-3.1.3/share/hadoop/common/lib/guava-27.0-jre.jar /opt/module/flink-1.17.2/lib/

3. 配置Hadoop环境变量

   export HADOOP_CLASSPATH=`hadoop classpath`
   export HADOOP_CONF_DIR=$HADOOP_HOME/etc/hadoop