Hadoop和zookeeper集群相关执行脚本(未完,持续更新中~)

1、Hadoop集群查看状态

搭建Hadoop数据集群时,按以下路径操作即可生成脚本

test_1@analysis01 bin$ pwd

/home/test_1/hadoop/bin

test_01@analysis01 bin$ vim jpsall

#!/bin/bash

for host in analysis01 analysis02 analysis03

do

echo =============== $host ===============

ssh $host jps

done

test_1@analysis01 ./jpsall #运行脚本,查看状态

=============== analysis01 ===============

4304 ResourceManager

3697 NameNode

3833 DataNode

4426 NodeManager

7595 Jps

4063 SecondaryNameNode

=============== analysis02 ===============

4480 Jps

3538 NodeManager

3437 DataNode

=============== analysis03 ===============

3396 DataNode

3487 NodeManager

4431 Jps

2、Hadoop集群关闭

test_1@analysis01 \~$ vim shutdown_servers.sh

#!/bin/bash

服务器IP地址列表

servers=("192.168.2.131" "192.168.2.132" "192.168.2.130")

遍历服务器列表

for server in "${servers@}"

do

使用ssh登录到服务器并执行关机命令

ssh root@$server 'shutdown -h now'

done

test_1@analysis01 \~$ ./ shutdown_servers.sh #执行脚本

3、zookeeper启动关闭

root@master bin# vim xzk.sh

#!/bin/bash

cmd=$1

if $# -gt 1 ; then echo param must be 1; exit ; fi

echo ================== master $@=============

tput setaf 3

ssh master "source /etc/profile ; zkServer.sh $cmd"

for (( i=1 ; i<=2 ; i++ )) ; do

tput setaf 5

echo ============== slavei @ ==================

tput setaf 6

ssh slavei "source /etc/profile ; zkServer.sh cmd"

done

root@master bin# ./xzk.sh #执行脚本

相关推荐
牛奶咖啡1321 小时前
大数据Hadoop运维应用实践——双NameNode高可用Hadoop集群架构(上)
hadoop·高可用hadoop集群搭建·给服务器做免密信任·修改服务器主机名称·服务器本地配置主机名与ip映射·服务器配置jdk环境·服务器安装zooker
jjjava2.02 天前
SpringMVC入门指南:从零掌握核心要点
数据仓库·hive·hadoop
ljs6482739513 天前
Hadoop集群部署常见问题
大数据·hadoop·分布式
TTBIGDATA3 天前
【Ambari Plus】14.Hue 安装
大数据·hadoop·ambari·hdp·hue·cdh·bigtop
2501_942389554 天前
特斯拉的车辆摄像头每四天为AI训练集采集的数据量
人工智能·hadoop·zookeeper·oracle·时序数据库·memcache
牛奶咖啡134 天前
大数据Hadoop运维应用实践——Hadoop大数据平台基础与架构(hadoop伪分布式的安装部署)
大数据·hadoop·分布式·hadoop是什么?有啥用?·hadoop的适用与不适用场景·hadoop伪分布式的安装部署·hadoop分布式存储操作
TTBIGDATA5 天前
【Ambari Plus】15.Livy 安装
大数据·运维·hadoop·ambari·hdp·cdh·bigtop
李昊哲小课5 天前
Ubuntu26.04-Hadoop3.5.0搭建Hbase2.6.6集群
hadoop·hbase
我登哥MVP5 天前
Hadoop成长史-从Nutch子项目到大数据生态王者
java·大数据·hadoop·分布式·云原生·云计算
我登哥MVP5 天前
HDFS硬核拆解-读写Pipeline与Java实战
java·hadoop·hdfs·云原生·云计算