修炼k8s+flink+hdfs+dlink(一:安装flink)

一:standalone的ha环境部署。

  1. 创建目录,上传安装包。
sql 复制代码
mkdir /opt/app/flink
上传安装包到本目录。
tar -zxvf flink-1.13.6-bin-scala_2.12.tgz
  1. 配置参数。
    在flink-conf.yaml中添加zookeeper配置
sql 复制代码
jobmanager.rpc.address: node01
high-availability: zookeeper
high-availability.storageDir: hdfs://cluster/flink/ha/
high-availability.zookeeper.quorum: node01:2181,node02:2181,node03:2181
state.backend: filesystem
state.checkpoints.dir: hdfs://cluster/flink-checkpoints
  1. 传送文件夹。
sql 复制代码
scp -r /opt/app/flink/flink-1.13.6 root@node02:/opt/app/flink/flink-1.13.6
scp -r /opt/app/flink/flink-1.13.6 root@node03:/opt/app/flink/flink-1.13.6
  1. 启动。
    在node01,node02节点
    ./bin/jobmanager.sh start
    在node01,node02节点
    ./bin/taskmanager.sh start

jps

查看界面。

http://node01:8081/#/overview

相关推荐
D愿你归来仍是少年26 分钟前
Apache Flink Checkpoint 与 Chandy-Lamport 算法深度解析
算法·flink·apache
docsz38 分钟前
Flink-1.20集群部署
linux·服务器·flink
hellolianhua2 小时前
测试集群hdfs和mapreduce
大数据·hadoop·hdfs
风向决定发型丶3 小时前
K8S readinessGates详解
云原生·容器·kubernetes
ai产品老杨3 小时前
破局算力碎片化:基于K8s调度与Docker多架构镜像的GB28181/RTSP异构AI视频底座实践
docker·架构·kubernetes
returnthem3 小时前
Kubernetes集群架构组件全解
容器·架构·kubernetes
风向决定发型丶3 小时前
K8S中podManagementPolicy和updateStrategy的关系
云原生·容器·kubernetes
恋红尘1 天前
K8S 配置与调度-叩丁狼
云原生·容器·kubernetes
恋红尘1 天前
K8S Pod 基础解析-分篇-叩丁狼
云原生·容器·kubernetes·pod
丘桔1 天前
k8s01:容器运行时之争
云原生·容器·kubernetes