大数据之Hadoop(一)

目录

一、准备三台服务器

二、虚拟机间配置免密登录

三、安装JDK

四、关闭防火墙

五、关闭安全模块SELinux

六、修改时区和自动时间同步


一、准备三台服务器

我们先准备三台服务器,可以通过虚拟机的方式创建,也可以选择云服务器。

关于如何创建虚拟机,我有写过相关文章。可以参考【编程环境安装】专题。

二、虚拟机间配置免密登录

配置的目的是方便分发资源。可以参考虚拟机之间配置免密登录_何苏三月的博客-CSDN博客

三、安装JDK

大数据的很多框架都依赖于JDK,所以,我们为每台服务器都安装好JDK。

Linux环境下安装JDK1.8_linux安装openjdk1.8_何苏三月的博客-CSDN博客

四、关闭防火墙

复制代码
systemctl stop firewalld
systemctl disable firewalld

五、关闭安全模块SELinux

Linux系统有一个安全模块SELinux,用以限制用户和程序的相关权限,来确保系统的安全稳定。

为了避免后面出现问题,我的建议是直接关掉。

需要在每台服务器执行如下命令:

复制代码
vim /etc/sysconfig/selinux

# 将第七行 SELINUX=enforcing 改为
SELINUX=disabled

然后保存退出后,重启虚拟机即可。

注意一定要写对,否则系统无法启动了。

六、修改时区和自动时间同步

俗称对表。

这需要我们下载一款ntp的软件来帮助我们完成"对表"工作。注意:依然是每台服务器都需要设置。

  1. 安装ntp软件

    yum install -y ntp

2.更新时区

复制代码
rm -f /etc/localtime
sudo ln -s /usr/share/zoneinfo/Asia/Shanghai /etc/localtime

3.同步时间

复制代码
ntpdate -u ntp.aliyun.com

4.开启ntp服务并设置开机自启

复制代码
systemctl start ntpd
systemctl enable ntpd

演示

以上前期准备工作就算是做完了。

我的建议是做好虚拟机快照,这样即使后面服务器崩溃出问题了,我们也可以回到当前这个状态。

ok,我们下个教程见~

相关推荐
中电金信1 分钟前
重构金融数智化产业版图:中电金信“链主”之道
大数据·人工智能
七七-d8 分钟前
配置Hadoop集群-上传文件
大数据·hadoop·eclipse
信徒_36 分钟前
Kafka topic 中的 partition 数据倾斜问题
分布式·kafka
Paraverse_徐志斌37 分钟前
Kafka 如何保证消息顺序性
分布式·中间件·kafka·消息队列
心仪悦悦2 小时前
Spark缓存
大数据·缓存·spark
我叫珂蛋儿吖2 小时前
[redis进阶六]详解redis作为缓存&&分布式锁
运维·c语言·数据库·c++·redis·分布式·缓存
lix的小鱼2 小时前
安装Hadoop并运行WordCount程序
大数据·linux·hadoop
七七-d2 小时前
测试集群的功能-执行wordcount程序
大数据
INFINI Labs3 小时前
INFINI Console 纳管 Elasticsearch 9(一):指标监控、数据管理、DSL 语句执行
大数据·elasticsearch·搜索引擎·console
椰椰椰耶4 小时前
【RabbitMQ】工作队列和发布/订阅模式的具体实现
分布式·rabbitmq·ruby