分布式编程实验二:Flink安装与编程实践(头歌云客)

Flink的运行需要Java环境的支持,因此,在安装Flink之前,请先参照相关资料安装Java环境(比如Java8)。然后,到Flink官网下载安装包。

参考链接:http://t.csdnimg.cn/VKdb4

然后,使用如下命令对安装文件进行解压缩:

复制代码
#解压安装包
root@educoder:~# cd /data/bigfiles
root@educoder:/data/bigfiles# ll
root@educoder:/data/bigfiles# sudo tar xf flink-1.11.2-bin-scala_2.12.tgz -C /usr/local/
root@educoder:/data/bigfiles# cd /usr/local
root@educoder:/usr/local# ll
root@educoder:/usr/local# sudo mv flink-1.11.2 flink
 
#把spark目录权限赋予给root用户
root@educoder:/usr/local# sudo chown -R root:root flink/

Flink对于本地模式是开箱即用的,如果要修改Java运行环境,可以修改/usr/local/flink/conf/flink-conf.yaml文件中的env.java.home参数,设置为本地Java的绝对路径。

复制代码
#添加环境变量
root@educoder:/usr/local# vim ~/.bashrc
export FLINK_HOME=/usr/local/flink
export PATH=$FLINK_HOME/bin:$PATH
 
#使环境变量生效
root@educoder:/usr/local# source ~/.bashrc

#启动Flink
root@educoder:/usr/local# cd /usr/local/flink/
root@educoder:/usr/local/flink# ./bin/start-cluster.sh
 
#使用jps命令查看进程:
root@educoder:/usr/local/flink# jps
947 Jps
813 TaskManagerRunner
463 StandaloneSessionClusterEntrypoint

如果能够看到TaskManagerRunner和StandaloneSessionClusterEntrypoint这两个进程,就说明启动成功。

Flink的JobManager同时会在8081端口上启动一个Web前端,可以在浏览器中输入"http://localhost:8081"来访问。

Flink安装包中自带了测试样例,这里可以运行WordCount样例程序来测试Flink的运行效果,具体命令如下:

复制代码
root@educoder:/usr/local/flink# ./bin/flink run /usr/local/flink/examples/batch/WordCount.jar
Executing WordCount example with default input data set.
Use --input to specify file input.
Printing result to stdout. Use --output to specify output path.
Job has been submitted with JobID a233bdcf94be8dff81c16700a37af554
Program execution finished
Job with JobID a233bdcf94be8dff81c16700a37af554 has finished.
Job Runtime: 1403 ms
Accumulator Results: 
- b976f607e34fcfc1b3e8e840de3c8388 (java.util.ArrayList) [170 elements]


(a,5)
(action,1)
(after,1)
(against,1)
......
相关推荐
小羊没烦恼!1 天前
微服务化的基石——持续集成
java·大数据·word·powerpoint·.net
一隅论数智1 天前
给AI一张“业务概念地图“:本体如何从哲学走向企业智能
大数据·人工智能·经验分享·笔记·学习·学习方法·政务
尧炎科技1 天前
防潮抗变形,就选纯品梅花全桉多层板
大数据
程序员大阳1 天前
副队长大数据教程(5)--集群情况下虚拟机网络配置
大数据·集群·nat·网路
自由能燃气设备1 天前
商用全预混低氮冷凝锅炉免费方案vs付费方案对比+选型避坑指南
大数据·数据库·人工智能
科创致远1 天前
科创致远 ESOP 系统核心效能与实战价值展示
大数据·数据库·人工智能·精益工程
嘉立创FPC苗工1 天前
FPC与机器人的双向赋能,解锁智能装备进化新势能
大数据·人工智能·制造·fpc·电路板
AI职业加油站1 天前
AI智能体应用工程师证书:政策红利下的职业新风口
大数据·运维·人工智能·学习·职场发展
龙亘川1 天前
一网统管AI平台民生业务实践:基于城市数字底座赋能公积金业务服务升级
大数据·安全·智慧城市·开源软件·数据可视化·政务
码流子1 天前
高速公路安全监测实践:碰撞监测预警+物联网底座,从感知到处置的闭环
大数据·人工智能·物联网·算法·架构