【hadoop】相关集群开启命令

Hadoop

Hdfs

NameNode:元数据

DataNode:数据块

复制代码
start-dfs.sh  // 启动hdfs
hadoop-daemon.sh start namenode // hdfs和yarn通用

Yarn

ResourceManager:集群资源

NodeManager:节点资源

复制代码
start-yarn.sh  // 启动yarn
hadoop-daemon.sh start namenode // hdfs和yarn通用

Zookeeper

每一台机器都要启动 zkServer.sh start

Hive

hadoop集群开启后 hive

HBase 16010

HMaster

HRegionServer

Hdfs集群开启后 start-hbase.sh

Flume

配置文件 net-flume-logger.conf 后

flume-ng agent

-n a1

-c ~/flume/conf

-f ~/flume/conf/net-flume-logger.conf

-Dflume.root.logger=INFO,console

Kafka

Zookeeper集群开启后

kafka-server-start.sh -daemon ~/kafka/config/server.properties

Spark

~/spark/sbin/start-all.sh

启动Hadoop集群后 start-cluster.sh

Davinci

start-server.sh

相关推荐
DevOpenClub9 分钟前
全球区域与 IP 定位工作台案例方案
大数据·网络·网络协议·tcp/ip
2601_9620739714 分钟前
大数据-258 离线数仓 - Griffin架构 配置安装 Livy 架构设计 解压配置 Hadoop Hive
大数据·hadoop·架构
2601_9620746818 分钟前
大数据-263 实时数仓 - Canal 工作原理 工作流程 MySQL Binglog基本介绍
大数据·数据库·mysql
Lost of 程序猿30 分钟前
ASP.NET Core Saga 分布式事务深度实战:备件采购跨服务长流程,如何保证“要么全成,要么全回“
分布式·后端·asp.net
XiYang-DING44 分钟前
地图城市缓存优化:ApplicationReadyEvent + Caffeine + Redis + Redisson 分布式锁
redis·分布式·缓存
用户3610588626121 小时前
SparkStreaming 之 transform 算子详解及代码实现
大数据·spark
AI备案指南-满满1 小时前
数字虚拟人也开始备案了:AI虚拟人“生成式AI备案 + 算法备案“双重合规全解析
大数据·人工智能·机器人·生成式人工智能·算法备案
Sky1987star1 小时前
Sales Agent OS 为什么必须保留人工接管与结果回写?
大数据·人工智能
Microsoft Word1 小时前
AI Agent入门:从LLM、上下文和工具到Harness工程
大数据·人工智能·机器学习
2601_962076251 小时前
大数据-267 实时数仓 - ODS Lambda架构 Kappa架构 核心思想
大数据·架构