flink集群服务搭建

1.安装

js 复制代码
tar -zxvf flink-1.17.0-bin-scala_2.12.tgz -C /opt/module/

2.修改配置文件

js 复制代码
vim flink-conf.yaml

#hadoop102
# JobManager节点地址.
jobmanager.rpc.address: hadoop102
jobmanager.bind-host: 0.0.0.0
rest.address: hadoop102
rest.bind-address: 0.0.0.0
# TaskManager节点地址.需要配置为当前机器名
taskmanager.bind-host: 0.0.0.0
taskmanager.host: hadoop102

vim workers

hadoop102
hadoop103
hadoop104

vim masters

hadoop102:8081


xsync /opt/module/flink

vim flink-conf.yaml

#hadoop103
修改前
taskmanager.host=hadoop102
修改后
taskmanager.host=hadoop103


vim flink-conf.yaml

#hadoop104
修改前
taskmanager.host=hadoop102
修改后
taskmanager.host=hadoop104

3.服务启动与停止

js 复制代码
bin/start-cluster.sh //启动服务
bin/stop-cluster.sh //停止服务

访问Web UI
启动成功后,同样可以访问<http://hadoop102:8081>对flink集群和任务进行监控管理
相关推荐
凤山老林14 分钟前
数据库读写分离与动态路由实战:Spring Boot + ShardingSphere-JDBC 生产配置
数据库·spring boot·后端·分库分表·sharding-jdbc
Zane19941 小时前
调用了 async 函数却没执行?一文讲透协程、event loop 与 await
后端·python
Zane19941 小时前
HashMap 为什么要在长度16、容量必须是2的幂这些细节上较劲
java·后端
掘金者阿豪1 小时前
若依启动突然报 Redis MISCONF?一次从应用报错到磁盘爆满的完整排查记录
后端
boooooooom2 小时前
尝尝咸淡:从朴素 RAG 到 Graph RAG——一个烹饪问答系统的三层检索升级之路
前端·后端·llm
2601_963870183 小时前
【计算机毕业设计】基于Vue+Spring Boot的助农电商系统的设计与实现
spring boot·后端·课程设计
sun༒4 小时前
Spring @Scheduled 定时任务详解:Cron表达式、执行顺序、优先级与并行调度
java·后端·spring
yuhaiqiang4 小时前
从这两件事就能看出 vibecoding 距离专业作品差距有多大?AI 能抹平技术,但抹不平品味 !
前端·后端·程序员
野生技术架构师4 小时前
Spring Boot 实现数据脱敏:自定义注解 + Jackson 序列化器
java·spring boot·后端