Hadoop服务端口号、Spark端口号、Hive端口号以及启动命令

文章目录

  • [1. 服务端口号](#1. 服务端口号)
    • [1.1 Hadoop相关的服务端口号](#1.1 Hadoop相关的服务端口号)
    • [1.2 Spark相关的服务端口号](#1.2 Spark相关的服务端口号)
    • [1.3 Hive的连接端口](#1.3 Hive的连接端口)
  • [2. 服务启动指令](#2. 服务启动指令)

1. 服务端口号

1.1 Hadoop相关的服务端口号

  • HDFS的web页面访问端口 9870
  • HDFS 的程序访问端口 8020
  • Yarn的访问端口 8088
  • 历史日志访问端口 19888

1.2 Spark相关的服务端口号

  • standalone 8080 查看资源调度
  • 历史日志 18080
  • 交互模式下 查看计算运行情况 4040

1.3 Hive的连接端口

  • 10000

2. 服务启动指令

  • Hadoop
python 复制代码
# 启动所有服务器
/export/server/hadoop/sbin/start-all.sh 
# 启动历史日志
/export/server/hadoop/bin/mapred --daemon start historyserver
  • Hive启动
python 复制代码
# 启动metastore
nohup hive --service  metastore >> /export/server/hive/metastore.log  2>&1 &
# 启动hiveserver
nohup hive --service  hiveserver2  >> /export/server/hive/hiveserver2.log  2>&1 &
  • zookeeper启动
python 复制代码
/export/server/zookeeper/bin/zkServer.sh start
  • Spark启动
python 复制代码
# standalone的启动
/export/server/spark/sbin/start-all.sh

# 历史日志启动
/export/server/spark/sbin/start-history-server.sh
相关推荐
大大大大晴天8 分钟前
实时数仓怎么建:基于StarRocks的宽表、指标层与主题建模
大数据
AC赳赳老秦2 小时前
公开图片 OCR 数据提取:OpenClaw 合规采集公开信息图,识别文字与表格并转化为结构化数据
java·大数据·前端·数据库·python·php·openclaw
bransyin2 小时前
一个 SQL 字段到底是怎么算出来的?我做了一个能给出“证据”的血缘工具
大数据·sql·ai·血缘
AC赳赳老秦4 小时前
风控岗应用:OpenClaw 采集公开司法与经营异常数据,自动生成企业风险评估报告
大数据·c语言·数据库·人工智能·python·php·openclaw
starzy19905 小时前
SparkSQL 数据源与底层架构深度剖析
大数据·分布式·架构·spark
番茄炒鸡蛋加糖6 小时前
RabbitMQ 全套复盘 + Nacos+ES+MyBatis-Plus 梳理
分布式·rabbitmq
Elastic 中国社区官方博客6 小时前
你的 AI agent 不需要你的 API 密钥:使用 OAuth 2.1 对 Elasticsearch MCP 服务器进行身份验证
大数据·运维·人工智能·elasticsearch·搜索引擎·全文检索
只说证事10 小时前
大数据专业不考证能找到工作吗
大数据
龙亘川10 小时前
综合执法一体化数字管控平台介绍
大数据·人工智能·安全·智慧城市