分布式编程实验二:Flink安装与编程实践(头歌云客)

Flink的运行需要Java环境的支持,因此,在安装Flink之前,请先参照相关资料安装Java环境(比如Java8)。然后,到Flink官网下载安装包。

参考链接:http://t.csdnimg.cn/VKdb4

然后,使用如下命令对安装文件进行解压缩:

复制代码
#解压安装包
root@educoder:~# cd /data/bigfiles
root@educoder:/data/bigfiles# ll
root@educoder:/data/bigfiles# sudo tar xf flink-1.11.2-bin-scala_2.12.tgz -C /usr/local/
root@educoder:/data/bigfiles# cd /usr/local
root@educoder:/usr/local# ll
root@educoder:/usr/local# sudo mv flink-1.11.2 flink
 
#把spark目录权限赋予给root用户
root@educoder:/usr/local# sudo chown -R root:root flink/

Flink对于本地模式是开箱即用的,如果要修改Java运行环境,可以修改/usr/local/flink/conf/flink-conf.yaml文件中的env.java.home参数,设置为本地Java的绝对路径。

复制代码
#添加环境变量
root@educoder:/usr/local# vim ~/.bashrc
export FLINK_HOME=/usr/local/flink
export PATH=$FLINK_HOME/bin:$PATH
 
#使环境变量生效
root@educoder:/usr/local# source ~/.bashrc

#启动Flink
root@educoder:/usr/local# cd /usr/local/flink/
root@educoder:/usr/local/flink# ./bin/start-cluster.sh
 
#使用jps命令查看进程:
root@educoder:/usr/local/flink# jps
947 Jps
813 TaskManagerRunner
463 StandaloneSessionClusterEntrypoint

如果能够看到TaskManagerRunner和StandaloneSessionClusterEntrypoint这两个进程,就说明启动成功。

Flink的JobManager同时会在8081端口上启动一个Web前端,可以在浏览器中输入"http://localhost:8081"来访问。

Flink安装包中自带了测试样例,这里可以运行WordCount样例程序来测试Flink的运行效果,具体命令如下:

复制代码
root@educoder:/usr/local/flink# ./bin/flink run /usr/local/flink/examples/batch/WordCount.jar
Executing WordCount example with default input data set.
Use --input to specify file input.
Printing result to stdout. Use --output to specify output path.
Job has been submitted with JobID a233bdcf94be8dff81c16700a37af554
Program execution finished
Job with JobID a233bdcf94be8dff81c16700a37af554 has finished.
Job Runtime: 1403 ms
Accumulator Results: 
- b976f607e34fcfc1b3e8e840de3c8388 (java.util.ArrayList) [170 elements]


(a,5)
(action,1)
(after,1)
(against,1)
......
相关推荐
自由能燃气设备3 小时前
燃气容积式热水器厂家选购指南:2026年商用热水设备采购避坑手册
大数据·数据库·数据仓库·人工智能
ApacheSeaTunnel3 小时前
从 60万行/秒说起,看 SeaTunnel Zeta 基准测试如何做到”测得准“
大数据·数据集成·基准测试·seatunnel·数据同步
2601_963869954 小时前
【计算机毕业设计】基于Java的线上就医平台设计与实现
大数据·人工智能·课程设计
TDengine (老段)5 小时前
TDengine taosAdapter — 多协议网关详解
大数据·数据库·物联网·时序数据库·iot·tdengine·涛思数据
恒拓高科WorkPlus5 小时前
从“可选项”到“必选项”——私有化部署即时通讯如何重塑企业协作新底座
大数据·网络·人工智能
IT摆渡者6 小时前
VM EXSI7.0存储硬盘故障处理
大数据·linux·github
Bobolink_6 小时前
IP更换频率:账号运营里多久换一次IP算正常
大数据·网络协议·tcp/ip
大任视点6 小时前
“我与秦岭”主题征文与故事及“秦岭微镜头”短视频、摄影作品征集活动通知
大数据·人工智能·业界资讯
Bzc11456236 小时前
守正笃行 匠心护康:以中医智慧赋能新时代慢病长效管理
大数据·人工智能·生活
BD_Marathon6 小时前
部署Spark
大数据·javascript·spark