基于Hadoop平台的电信客服数据的处理与分析③项目开发:搭建基于Hadoop的全分布式集群---任务2:准备网络环境

任务描述

任务内容为初始化网络分配方案,修改网卡信息、主机名称及hosts文件等操作。

任务指导

修改主机名称并完成集群内个节点的名称与IP地址映射,保证集群内节点间能够互相访问

任务实现

1. 修改主机名

使用【vim /etc/hostname】命令,修改所有节点的主机名称。如修改master1的名称

复制代码
# vim /etc/hostname

|---------|
| master1 |

分别重启所有节点后再查看结果:

  • 使用【reboot】命令重启系统;
  • 使用【hostname】命令查看所有节点的主机名是否修改成功。

2. 修改hosts中的主机名与IP地址的映射关系

在进行Hadoop全分布模式集群配置时,需要在/etc/hosts文件中添加集群中所有机器的IP与主机名,这样Master与所有的Slave机器之间不仅可以通过IP进行通信,而且还可以通过主机名进行通信。所以在所有的机器上的"/etc/hosts"文件中都要修改。

输入【vim /etc/hosts】命令,修改/etc/hosts文件添加如下内容(IP地址请参考实际情况修改):

复制代码
127.0.0.1         localhost 

192.168.1.245 master1
192.168.1.246 slave1
192.168.1.247 slave2

在每一个节点上使用ping命令,分别去ping其它节点的主机名,测试是否可以ping通,如:

复制代码
# ping slave1
PING slave1 (192.168.1.246) 56(84) bytes of data.
64 bytes from slave1 (192.168.1.246): icmp_seq=1 ttl=64 time=0.324 ms
64 bytes from slave1 (192.168.1.246): icmp_seq=2 ttl=64 time=0.193 ms
64 bytes from slave1 (192.168.1.246): icmp_seq=3 ttl=64 time=0.213 ms
64 bytes from slave1 (192.168.1.246): icmp_seq=4 ttl=64 time=0.188 ms
64 bytes from slave1 (192.168.1.246): icmp_seq=5 ttl=64 time=0.198 ms
64 bytes from slave1 (192.168.1.246): icmp_seq=6 ttl=64 time=0.199 ms
^C
--- slave1 ping statistics ---
6 packets transmitted, 6 received, 0% packet loss, time 5193ms
rtt min/avg/max/mdev = 0.188/0.219/0.324/0.048 ms

可以看出已经能用主机名进行ping通了,说明刚才添加的内容,在局域网内能进行DNS解析了,那么现在剩下的事儿就是在其余节点上进行相同的配置。然后进行测试。

相关推荐
Elastic 中国社区官方博客1 小时前
将你的 Grafana Kubernetes 仪表板迁移到 Elastic Observability:相同的 PromQL,30 倍更快的查询
大数据·人工智能·elasticsearch·搜索引擎·容器·kubernetes·grafana
abcy0712131 小时前
storm核心实时机制
大数据·storm
中微极客1 小时前
2026主流AI Agent框架技术选型与性能对比
运维·网络·人工智能
灵机一物1 小时前
合伙制律所分红和提成律师个税怎么合规优化?
大数据·人工智能
Elastic 中国社区官方博客4 小时前
如何使用 OpenTelemetry 对你的搜索 API 进行埋点,并使用 ES|QL 对其进行查询
大数据·功能测试·elasticsearch·搜索引擎·全文检索·可用性测试
猿的天空5 小时前
机器人双手迎来全栈训练系统:灵初智能EgoSteer让灵巧手无所不能
网络·人工智能·计算机·ai·程序员·机器人·编程
Xzaveir_7775 小时前
OPPO、vivo、荣耀号码认证:多终端拨测矩阵与异常复现
大数据·网络·科技·矩阵·产品经理·ai-native
wuqingshun3141595 小时前
从网络角度来看,用户从输入网址到网页显示,期间发生了什么?
网络
老徐聊GEO5 小时前
亲测有效的AI品牌检测公司案例分享
大数据·人工智能·python
韭菜学长5 小时前
科技型中小企业如何申请政府补贴?申报指南
大数据·人工智能