大数据flink篇之三-flink运行环境安装(一)单机Standalone安装

一、安装包下载地址

https://archive.apache.org/dist/flink/flink-1.15.0/

二、安装配置流程

前提基础:Centos环境(建议7以上)

安装命令:
解压:tar -zxvf flink-xxxx.tar.gz
修改配置conf/flink-conf.yaml:

jobmanager.rpc.address: 192.168.47.131-主机地址

jobmanager.rpc.port: 6123

taskmanager.numberOfTaskSlots: 4

rest.port: 8081

**部分配置解析如下:

jobmanager.rpc.address: localhost-主机名

jobmanager.rpc.port: 6123-主机通信端口号

jobmanager.heap.size: 1024m-jvm 堆内存

taskmanager.memory.process.size: 1728m-当前 taskmanager 进程的堆内和堆外内存等(与 flink.size 相比,多了一些不在flink 状态管理的堆外内存)

taskmanager.numberOfTaskSlots: 1-静态分配属性资源

parallelism.default: 1-运行时的并行度,默认

启动flink:

./bin/start-cluster.sh

启动的进程为:

三、Web界面

安装成功后会显示如下界面:

后续会补充集群版本及在yarn和k8s环境下的部署。

注:如果在虚拟机上安装,需要开放相关端口

firewall-cmd --zone=public --permanent --add-port=8081/tcp:开启端口8081

firewall-cmd --reload:重载防火墙

相关推荐
幸好我会魔法4 小时前
人格分裂(交互问答)-小白想懂Elasticsearch
大数据·spring boot·后端·elasticsearch·搜索引擎·全文检索
顧棟6 小时前
【ES实战】治理项之索引模板相关治理
大数据·elasticsearch·yarn
karatttt7 小时前
MapReduce,Yarn,Spark理解与执行流程
大数据·spark·mapreduce
STONE_KKK8 小时前
半小时速通flume-flume概述
大数据·flume
shinelord明10 小时前
【大数据】数据治理浅析
大数据·人工智能·软件工程
说私域11 小时前
私域流量池构建与转化策略:以开源链动2+1模式AI智能名片S2B2C商城小程序为例
大数据·人工智能·小程序·开源
LPiling13 小时前
激光晶体材料行业深度分析
大数据·人工智能
牛马程序员‍15 小时前
云岚到家项目100问 v1.0
大数据·apache
撸码到无法自拔16 小时前
MATLAB中处理大数据的技巧与方法
大数据·开发语言·matlab
三月七(爱看动漫的程序员)17 小时前
Genetic Prompt Search via Exploiting Language Model Probabilities
大数据·人工智能·算法·语言模型·自然语言处理·prompt