【hadoop】相关集群开启命令

Hadoop

Hdfs

NameNode:元数据

DataNode:数据块

复制代码
start-dfs.sh  // 启动hdfs
hadoop-daemon.sh start namenode // hdfs和yarn通用

Yarn

ResourceManager:集群资源

NodeManager:节点资源

复制代码
start-yarn.sh  // 启动yarn
hadoop-daemon.sh start namenode // hdfs和yarn通用

Zookeeper

每一台机器都要启动 zkServer.sh start

Hive

hadoop集群开启后 hive

HBase 16010

HMaster

HRegionServer

Hdfs集群开启后 start-hbase.sh

Flume

配置文件 net-flume-logger.conf 后

flume-ng agent

-n a1

-c ~/flume/conf

-f ~/flume/conf/net-flume-logger.conf

-Dflume.root.logger=INFO,console

Kafka

Zookeeper集群开启后

kafka-server-start.sh -daemon ~/kafka/config/server.properties

Spark

~/spark/sbin/start-all.sh

启动Hadoop集群后 start-cluster.sh

Davinci

start-server.sh

相关推荐
chenglin01611 分钟前
ES_索引的操作
大数据·数据库·elasticsearch
程序员不迷路1 小时前
Flink学习
大数据·flink
码农小灰2 小时前
Kafka消息持久化机制全解析:存储原理与实战场景
java·分布式·kafka
Raisy_3 小时前
05 ODS层(Operation Data Store)
大数据·数据仓库·kafka·flume
郭二哈4 小时前
git的使用
大数据·网络·git·elasticsearch
subuq7 小时前
Web3.0 时代的电商系统:区块链如何解决信任与溯源问题?
大数据·网络·学习
Lx3529 小时前
Hadoop数据倾斜问题诊断与解决方案
大数据·hadoop
纪莫9 小时前
Kafka如何保证「消息不丢失」,「顺序传输」,「不重复消费」,以及为什么会发生重平衡(reblanace)
java·分布式·后端·中间件·kafka·队列
想躺平的咸鱼干9 小时前
RabbitMQ 基础
java·分布式·rabbitmq·idea·amqp·消息转换器·交换机模型
IT果果日记10 小时前
flink+dolphinscheduler+dinky打造自动化数仓平台
大数据·后端·flink