大数据开发--02.环境准备

一.准备三台linux虚拟机

1.分别取名node1,node2,node3

2.配置静态ip

这里以node1为例,配置静态ip地址,其他node2.node3一样

配置完成之后别忘记 systemctl restart network

3.在各自的**/etc/hosts**文件中编辑三个Ip地址

三台都要配置,

4.然后再windows电脑的c盘windows/system32/dirver/etc/host 文件中配置以上一样的内容

最后别忘记ping 一下测试一下通讯

5.使用finalshell去链接三台虚拟机

5**.虚拟机之间免密登录**

到此为止,准备工作已经完成!

6.问题

在之前的测试时,发现虚拟机设置完static静态ip地址之后无法ping通外网,在网上查找了资料发现都无法解决,最后发现了终极解决方法:

在虚拟机设置里面新添加一个网络适配器

这样就完美解决了问题,可以ping 通外网了!

二.安装jdk

我们的hadoop是基于java语言编写的,所以我们需要再三台虚拟机上安装jdk:

1.可以取官网下载jdk的linux安装包

2.可以将提供的jdk安装包上传到虚拟机上面

1.创建 /export/server 目录

2.将jdk压缩包上传到该目录下面

3.解压jdk压缩包

4.构建软连接 ln -s jak1.8 jdk

5.在**/etc/profile**中配置jdk环境变量

bash 复制代码
export JAVA_HOME=/export/server/jdk
export PATH=$PATH:$JAVA_HOME/bin

6.使环境变量生效

bash 复制代码
source /etc/profile

7.删除自带的java构建安装的java

bash 复制代码
#删除自带java
rm -f /usr/bin/java
#构建安装的java
ln -s /export/server/jdk/bin/java /usr/bin/java

8.使用java -version测试版本

到这一步我们的jdk就安装好了,记得一定是三个机器都要执行一遍

三.关闭防火墙和安全模块

到目前为止,准备工作全部完成,下一节我们来安装hadoop!

相关推荐
大大大大晴天7 小时前
从 HDFS 到对象存储:计算存储分离如何重塑云原生大数据底座
大数据
GeW8 小时前
超详细!RHCE10版通用备考策略,内含评分细则解读
linux
用户041328465139 小时前
Linux 服务开机自启动怎么配置?systemctl enable 原理详解
linux
用户36105886261216 小时前
SparkStreaming 之 updateStateByKey 算子详解及代码实现
大数据·spark
咖啡屋和酒吧18 小时前
“隐性肩颈紧张”正在透支精力|没有酸痛,不代表肩颈处于健康状态
大数据·精选
草莓熊Lotso18 小时前
【Redis 初阶】Set 类型深度解析:去重集合的运算能力与实战场景
linux·网络·数据库·windows·redis·tcp/ip·缓存
张文君18 小时前
ubuntu26.04坏道坏块分区隔离急速版260831-V0.12
linux·python
港股研究社18 小时前
专注履约底座,顺丰同城在即时零售效率时代提升增长动能
大数据·人工智能
AI_yangxi20 小时前
短视频矩阵系统选哪家
大数据·人工智能·矩阵
贝锐1 天前
从国产化信创设备到商用安卓终端,向日葵如何帮助企业实现统一运维管理?
linux·运维·远程控制