Hadoop和zookeeper集群相关执行脚本(未完,持续更新中~)

1、Hadoop集群查看状态

搭建Hadoop数据集群时,按以下路径操作即可生成脚本

test_1@analysis01 bin$ pwd

/home/test_1/hadoop/bin

test_01@analysis01 bin$ vim jpsall

#!/bin/bash

for host in analysis01 analysis02 analysis03

do

echo =============== $host ===============

ssh $host jps

done

test_1@analysis01 ./jpsall #运行脚本,查看状态

=============== analysis01 ===============

4304 ResourceManager

3697 NameNode

3833 DataNode

4426 NodeManager

7595 Jps

4063 SecondaryNameNode

=============== analysis02 ===============

4480 Jps

3538 NodeManager

3437 DataNode

=============== analysis03 ===============

3396 DataNode

3487 NodeManager

4431 Jps

2、Hadoop集群关闭

test_1@analysis01 \~$ vim shutdown_servers.sh

#!/bin/bash

服务器IP地址列表

servers=("192.168.2.131" "192.168.2.132" "192.168.2.130")

遍历服务器列表

for server in "${servers@}"

do

使用ssh登录到服务器并执行关机命令

ssh root@$server 'shutdown -h now'

done

test_1@analysis01 \~$ ./ shutdown_servers.sh #执行脚本

3、zookeeper启动关闭

root@master bin# vim xzk.sh

#!/bin/bash

cmd=$1

if $# -gt 1 ; then echo param must be 1; exit ; fi

echo ================== master $@=============

tput setaf 3

ssh master "source /etc/profile ; zkServer.sh $cmd"

for (( i=1 ; i<=2 ; i++ )) ; do

tput setaf 5

echo ============== slavei @ ==================

tput setaf 6

ssh slavei "source /etc/profile ; zkServer.sh cmd"

done

root@master bin# ./xzk.sh #执行脚本

相关推荐
ha_lydms5 小时前
Hologres 简介
大数据·hadoop·阿里云·mapreduce·yarn·dataworks·hologres
TongSearch2 天前
使用 TongZK 做服务注册与服务发现
zookeeper·服务发现·国产化·东方通·tongzk
Francek Chen3 天前
【大数据处理与分析】实验5:MapReduce初级编程实践
大数据·hadoop·分布式·mapreduce
AI人工智能+电脑小能手4 天前
【大白话说Java面试题 第207题】【09_Zookeeper篇】第8题:谈谈 ZooKeeper 的可靠性保障机制
java·zookeeper·高可用·可靠性·分布式系统
January丶5 天前
docker-compose安装ZooKeeper集群
zookeeper
AI人工智能+电脑小能手5 天前
【大白话说Java面试题 第205题】【09_Zookeeper篇】第6题:ZooKeeper 实现分布式锁的原理
java·zookeeper·分布式锁·并发控制·分布式协调
AI人工智能+电脑小能手6 天前
【大白话说Java面试题 第203题】【09_Zookeeper篇】第4题:ZooKeeper 的节点类型有哪些?
java·zookeeper·分布式锁·分布式协调·znode
Zhu7588 天前
在k8s集群环境部署高可用的Apache Hadoop3.1.1定制版集群
hadoop·kubernetes
还有你Y9 天前
软件工程架构
hadoop·架构·软件工程
顧棟11 天前
Zookeeper热缩容解析
linux·服务器·zookeeper