sparksql远程服务thriftserver.sh启停脚本

最近做项目的时候,经常会开启和关闭spark的远程服务,thriftserver,其实这个服务和hive的hiveserver2服务很像,不妨照着试着修改一下吧。

在/usr/local/bin 下创建一个脚本:spark-service-manager.sh

脚本内容如下:

bash 复制代码
#!/bin/bash

# 使用方式: spark-server-manager.sh [start|stop|]
help_info() {
    echo "参数异常,请重新输入"
    exit -1
}

# 获取操作命令
op=$1

# 检查参数是否正确
if [ ! $op ]; then
    help_info
elif [ $op != "start" -a $op != "stop" ]; then
    help_info
fi

# 开启服务
start_thrift() {
    /opt/installs/spark/sbin/start-thriftserver.sh \
	--hiveconf hive.server2.thrift.port=10001 \
	--hiveconf hive.server2.thrift.bind.host=bigdata01 \
	--master yarn \
	--conf spark.sql.shuffle.partitions=2
}
# 停止服务
stop_thrift() {
   sh /opt/installs/spark/sbin/stop-thriftserver.sh
}


# 控制操作
${op}_thrift

里面具体按照路径,可以修改为自己的按照路径,修改完之后,记得添加权限:

chmod 777 spark-service-manager.sh

接着根据以下命令,试试吧:

bash 复制代码
spark-service-manager.sh start
spark-service-manager.sh stop
相关推荐
程序员敲代码吗1 天前
如何通过命令行启动COMSOL的参数化、批处理和集群扫描
java·c#·bash
dingdingfish2 天前
Bash 学习 - 第1章:Introduction
bash·shell·programming·introduction
xuchaoxin13753 天前
bash中的字符串处理@输出和格式化打印@echo@printf
chrome·bash
xuchaoxin13753 天前
bash@特殊字符@环境变量符号@特殊参数@参数扩展和替换@字符串处理用法总结
开发语言·bash
dingdingfish3 天前
Bash 学习 - 第2章:Definitions
bash·definition
xuchaoxin13753 天前
bash@参数扩展@参数转换@参数扩展操作符
bash
提娜米苏3 天前
非Root环境下的数据挂载解决方案:SSHFS与Mount详解
bash·sshfs
这儿有一堆花4 天前
任何东西都可以转成 Base64!?
bash
wasp5204 天前
Banana Slides 深度解析:AI Core 架构设计与 Prompt 工程实践
人工智能·prompt·bash
市场部需要一个软件开发岗位4 天前
一个无人机平台+算法监督平台的离线部署指南
java·python·算法·bash·无人机·持续部署