搭建spark伪分布集群

1.先查看虚拟机的默认名称,将其修改为vm01

2.更改了主机名,还需要修改/etc/hosts文件,在这个文件设定了IP地址与主机名的对应关系,类似DNS域名服务器的功能

3.修改spark相关配置文件,包括spark-env.sh和slave两个文件

4.将localhost改为vm01 保存退出

5.重启spark集群 出现worker和master表示成功

6.测试

7.在浏览器输入:http://vm01:8080/ 查看

相关推荐
wending-Y20 分钟前
记录一次排查Flink一直重启的问题
大数据·flink
UI设计兰亭妙微26 分钟前
医疗大数据平台电子病例界面设计
大数据·界面设计
Lsir10110_1 小时前
【Linux】进程信号(下半)
linux·运维·服务器
初恋叫萱萱1 小时前
模型瘦身实战:用 `cann-model-compression-toolkit` 实现高效 INT8 量化
大数据
skywalk81631 小时前
unbound dns解析出现问题,寻求解决之道
运维·服务器·dns·unbound
酉鬼女又兒1 小时前
零基础入门Linux指南:每天一个Linux命令_pwd
linux·运维·服务器
云飞云共享云桌面1 小时前
高性能图形工作站的资源如何共享给10个SolidWorks研发设计用
linux·运维·服务器·前端·网络·数据库·人工智能
skywalk81631 小时前
走近科学:unbound dns域名服务器自己本地解析出现问题,寻求解决之道
运维·服务器·dns·unbound
choke2331 小时前
Python 基础语法精讲:数据类型、运算符与输入输出
java·linux·服务器
AZ996ZA1 小时前
自学linux的第二十一天【DHCP 服务从入门到实战】
linux·运维·服务器·php