修炼k8s+flink+hdfs+dlink(一:安装flink)

一:standalone的ha环境部署。

  1. 创建目录,上传安装包。
sql 复制代码
mkdir /opt/app/flink
上传安装包到本目录。
tar -zxvf flink-1.13.6-bin-scala_2.12.tgz
  1. 配置参数。
    在flink-conf.yaml中添加zookeeper配置
sql 复制代码
jobmanager.rpc.address: node01
high-availability: zookeeper
high-availability.storageDir: hdfs://cluster/flink/ha/
high-availability.zookeeper.quorum: node01:2181,node02:2181,node03:2181
state.backend: filesystem
state.checkpoints.dir: hdfs://cluster/flink-checkpoints
  1. 传送文件夹。
sql 复制代码
scp -r /opt/app/flink/flink-1.13.6 root@node02:/opt/app/flink/flink-1.13.6
scp -r /opt/app/flink/flink-1.13.6 root@node03:/opt/app/flink/flink-1.13.6
  1. 启动。
    在node01,node02节点
    ./bin/jobmanager.sh start
    在node01,node02节点
    ./bin/taskmanager.sh start

jps

查看界面。

http://node01:8081/#/overview

相关推荐
wudl55662 小时前
flink 1.20 物化表(Materialized Tables)
大数据·flink·linq
黑黍12 小时前
如何在k8s中配置并使用nvidia显卡
云原生·容器·kubernetes
Cxzzzzzzzzzz15 小时前
Kubernetes 架构
容器·架构·kubernetes
ImproveJin16 小时前
Flink Source源码解析
大数据·flink
PONY LEE16 小时前
Flink Rebalance触发乱序的问题
大数据·flink
勇哥的编程江湖18 小时前
本地搭建Flinkcdc-mysql-kafka-flink-Doris实时数据集成
大数据·flink
梁正雄19 小时前
4、prometheus-服务发现k8s api-2
kubernetes·服务发现·prometheus
人生苦短12820 小时前
Kubernetes(k8s)
云原生·容器·kubernetes
驾数者1 天前
Flink SQL入门指南:从零开始搭建流处理应用
大数据·sql·flink
KM_锰1 天前
flink开发遇到的问题
大数据·flink