Hadoop和zookeeper集群相关执行脚本(未完,持续更新中~)

1、Hadoop集群查看状态

搭建Hadoop数据集群时,按以下路径操作即可生成脚本

test_1@analysis01 bin$ pwd

/home/test_1/hadoop/bin

test_01@analysis01 bin$ vim jpsall

#!/bin/bash

for host in analysis01 analysis02 analysis03

do

echo =============== $host ===============

ssh $host jps

done

test_1@analysis01 ./jpsall #运行脚本,查看状态

=============== analysis01 ===============

4304 ResourceManager

3697 NameNode

3833 DataNode

4426 NodeManager

7595 Jps

4063 SecondaryNameNode

=============== analysis02 ===============

4480 Jps

3538 NodeManager

3437 DataNode

=============== analysis03 ===============

3396 DataNode

3487 NodeManager

4431 Jps

2、Hadoop集群关闭

test_1@analysis01 \~$ vim shutdown_servers.sh

#!/bin/bash

服务器IP地址列表

servers=("192.168.2.131" "192.168.2.132" "192.168.2.130")

遍历服务器列表

for server in "${servers@}"

do

使用ssh登录到服务器并执行关机命令

ssh root@$server 'shutdown -h now'

done

test_1@analysis01 \~$ ./ shutdown_servers.sh #执行脚本

3、zookeeper启动关闭

root@master bin# vim xzk.sh

#!/bin/bash

cmd=$1

if $# -gt 1 ; then echo param must be 1; exit ; fi

echo ================== master $@=============

tput setaf 3

ssh master "source /etc/profile ; zkServer.sh $cmd"

for (( i=1 ; i<=2 ; i++ )) ; do

tput setaf 5

echo ============== slavei @ ==================

tput setaf 6

ssh slavei "source /etc/profile ; zkServer.sh cmd"

done

root@master bin# ./xzk.sh #执行脚本

相关推荐
IT毕设梦工厂5 小时前
计算机毕业设计选题推荐:基于大数据的草鱼价格分析与可视化|毕业设计选题|计算机毕设|选题推荐|毕设指导|项目定制|源码|高质量项目
大数据·hadoop·python·数据挖掘·数据分析·课程设计·大数据毕设项目
Gl�ria13 小时前
Hive SQL 执行卡住完整排查 & 处理
hive·hadoop·sql
Q26433650231 天前
【有源码】基于文本挖掘的消费者金融投诉主题发现与风险预警研究,基于Python的CFPB消费者投诉数据可视化分析系统
大数据·hadoop·机器学习·数据挖掘·spark·毕业设计·课程设计
Q26433650232 天前
【有源码】基于机器学习的商场商铺运营分群与可视化分析研究 基于Spark的商场商铺经营效率分析与可视化
大数据·hadoop·机器学习·数据挖掘·数据分析·spark·毕业设计
Gl�ria2 天前
Hadoop MapReduce / Hive 场景:ReduceTask 热点 Key 排查
运维·hadoop·数据倾斜
Q26433650232 天前
【有源码】基于机器学习的电信网络诈骗话术语义识别与可视化分析系统 XGBoost算法+Hadoop+Spark
大数据·hadoop·算法·机器学习·spark·毕业设计·课程设计
Q26433650232 天前
【有源码】基于 Hadoop 的强化学习智能体轨迹数据挖掘与可视化分析系统大数据毕设项目
大数据·hadoop·机器学习·数据挖掘·spark·课程设计·数据可视化
Q26433650233 天前
【有源码】基于大数据的药品多维度属性分析可视化系统 基于Spark的药品属性聚类与关联规则可视化分析系统
hadoop·机器学习·数据挖掘·spark·毕业设计·课程设计·大数据项目
Q26433650233 天前
【有源码】基于大数据的零售交易者行为特征与生存状况数据分析及可视化 Hadoop+Spark大数据项目
大数据·hadoop·信息可视化·数据挖掘·数据分析·spark·毕业设计
Q26433650233 天前
【有源码】基于 Hadoop 生态的化妆品销售数据存储分析与可视化 面向化妆品行业的用户画像构建与销售机会识别研究
大数据·hadoop·python·机器学习·spark·毕业设计·课程设计