修炼k8s+flink+hdfs+dlink(一:安装flink)

一:standalone的ha环境部署。

  1. 创建目录,上传安装包。
sql 复制代码
mkdir /opt/app/flink
上传安装包到本目录。
tar -zxvf flink-1.13.6-bin-scala_2.12.tgz
  1. 配置参数。
    在flink-conf.yaml中添加zookeeper配置
sql 复制代码
jobmanager.rpc.address: node01
high-availability: zookeeper
high-availability.storageDir: hdfs://cluster/flink/ha/
high-availability.zookeeper.quorum: node01:2181,node02:2181,node03:2181
state.backend: filesystem
state.checkpoints.dir: hdfs://cluster/flink-checkpoints
  1. 传送文件夹。
sql 复制代码
scp -r /opt/app/flink/flink-1.13.6 root@node02:/opt/app/flink/flink-1.13.6
scp -r /opt/app/flink/flink-1.13.6 root@node03:/opt/app/flink/flink-1.13.6
  1. 启动。
    在node01,node02节点
    ./bin/jobmanager.sh start
    在node01,node02节点
    ./bin/taskmanager.sh start

jps

查看界面。

http://node01:8081/#/overview

相关推荐
小白不想白a2 小时前
【Ansible】使用ansible部署k8s集群前的准备工作脚本
容器·kubernetes·ansible
岁岁种桃花儿9 小时前
详解 Kubernetes 命令:kubectl exec -it nginx -- bash 及实战场景
运维·nginx·kubernetes
哈哈很哈哈10 小时前
Flink SlotSharingGroup 机制详解
java·大数据·flink
Hello.Reader15 小时前
用 Flink DataStream API 搭建流式 ETL从无状态到有状态、从单流到连接流
flink·etl·原型模式
cg.family15 小时前
Flink 2.x 独立集群(Standalone) 的部署
flink
Hello.Reader16 小时前
Flink Operations Playground 部署、观测、容错、升级与弹性扩缩
大数据·flink
Hello.Reader20 小时前
从 0 到 1Flink DataStream API 入门与上手实战
大数据·flink
qq_569384121 天前
K8S (使用步骤)
云原生·容器·kubernetes
lifallen1 天前
Flink SourceOperator和WaterMark
大数据·flink
Hello.Reader1 天前
Flink 流式分析事件时间、Watermark 与窗口
大数据·flink