【hadoop】相关集群开启命令

Hadoop

Hdfs

NameNode:元数据

DataNode:数据块

复制代码
start-dfs.sh  // 启动hdfs
hadoop-daemon.sh start namenode // hdfs和yarn通用

Yarn

ResourceManager:集群资源

NodeManager:节点资源

复制代码
start-yarn.sh  // 启动yarn
hadoop-daemon.sh start namenode // hdfs和yarn通用

Zookeeper

每一台机器都要启动 zkServer.sh start

Hive

hadoop集群开启后 hive

HBase 16010

HMaster

HRegionServer

Hdfs集群开启后 start-hbase.sh

Flume

配置文件 net-flume-logger.conf 后

flume-ng agent

-n a1

-c ~/flume/conf

-f ~/flume/conf/net-flume-logger.conf

-Dflume.root.logger=INFO,console

Kafka

Zookeeper集群开启后

kafka-server-start.sh -daemon ~/kafka/config/server.properties

Spark

~/spark/sbin/start-all.sh

启动Hadoop集群后 start-cluster.sh

Davinci

start-server.sh

相关推荐
大大大大晴天11 小时前
Hudi Metadata Table 与 Hive Sync (HMS)怎么选?
大数据
手可摘星辰77719 小时前
一次线上FlinkCDC异常排查复盘
大数据·flink
大大大大晴天19 小时前
Hudi技术内幕:Metadata Table原理与实践
大数据
大大大大晴天2 天前
Hudi技术内幕:深入解析Index索引机制
大数据
阿里云大数据AI技术2 天前
Flink Forward Asia 2026 深圳启幕:Agentic Streaming for AI,开启实时智能新范式
大数据·flink
SelectDB2 天前
阶跃星辰基于 SelectDB 构建 PB 级 Agent 可观测平台
大数据·数据库·aigc
大大大大晴天6 天前
Hudi技术内幕:RecordPayload到RecordMerger
大数据
SelectDB6 天前
秒级弹性、最高降本 70%:SelectDB Serverless 如何重塑云数仓资源效率
大数据·后端·云原生
WhoAmI6 天前
MapReduce框架原理解析一:InputFormat
大数据·hadoop
WhoAmI6 天前
MapReduce框架原理解析三:OutputFormat
大数据·hadoop