云计算实验3——CentOS中storm的安装

本文是对"云计算"课程学习中 storm安装实验 的实验步骤记录。若有错误,欢迎交流指正。

实验环境:3台CentOS 7虚拟机,均已配置Java 1.7.0_79、zookeeper

目录

  • [1 解压与安装](#1 解压与安装)
  • [2 修改环境变量](#2 修改环境变量)
  • [3 修改storm配置文件](#3 修改storm配置文件)
  • [4 分发配置](#4 分发配置)
  • [5 启动storm](#5 启动storm)
  • [6 验证启动](#6 验证启动)

1 解压与安装

准备apache-storm-0.10.0.tar.gz压缩包,在/usr目录中使用命令解压

bash 复制代码
tar -zxvf apache-storm-0.10.0.tar.gz

然后在解压后的目录中新建一个logs文件夹,存放运行日志

bash 复制代码
cd /usr/apache-storm-0.10.0
mkdir logs

2 修改环境变量

bash 复制代码
vi /etc/profile

添加以下内容

复制代码
export STORM_HOME=/usr/apache-storm-0.10.0
export PATH=$PATH:$STORM_HOME/bin

执行命令,使配置文件生效

bash 复制代码
source /etc/profile

3 修改storm配置文件

首先进入storm目录

bash 复制代码
cd /usr/apache-storm-0.10.0/conf

编辑配置文件

bash 复制代码
vi storm.yaml

添加或修改为以下内容

复制代码
#指定storm使用的zk集群
storm.zookeeper.servers:
     - "node1"
     - "node2"
     - "node3"
#指定storm集群中的nimbus节点所在的服务器
nimbus.host: "node1"
#指定nimbus启动JVM最大可用内存大小
nimbus.childopts: "-Xmx1024m"
#指定supervisor启动JVM最大可用内存大小
supervisor.childopts: "-Xmx1024m"
#指定supervisor节点上,每个worker启动JVM最大可用内存大小
worker.childopts: "-Xmx768m"
#指定ui启动JVM最大可用内存大小,ui服务一般与nimbus同在一个节点上。
ui.childopts: "-Xmx768m"
#指定supervisor节点上,启动worker时对应的端口号,每个端口对应槽,每个槽位对应一个worker
supervisor.slots.ports:
    - 6700
    - 6701
    - 6702
    - 6703

4 分发配置

将配置好的storm分发到另外两台机器中。

在node1中执行下列命令,复制到其他机器。

bash 复制代码
scp -r /usr/apache-storm-0.10.0 root@node2:/usr/
scp -r /usr/apache-storm-0.10.0 root@node3:/usr/

然后通过ssh登录node2和node3,分别进行环境变量的配置。

在node2和node3中均执行下面命令

bash 复制代码
vi /etc/profile

添加以下内容

复制代码
export STORM_HOME=/usr/apache-storm-0.10.0
export PATH=$PATH:$STORM_HOME/bin

执行命令,使配置文件生效

bash 复制代码
source /etc/profile

5 启动storm

在所有节点中启动zookeeper,执行命令

bash 复制代码
zkServer.sh start

在node1中执行下面命令,启动storm

bash 复制代码
cd /usr/apache-storm-0.10.0
storm nimbus >> logs/nimbus.out 2>&1 &
storm ui >> logs/ui.out 2>&1 &

node2和node3中,执行下面的命令

bash 复制代码
cd /usr/apache-storm-0.10.0
storm supervisor >> logs/supervisor.out 2>&1 &

6 验证启动

在各节点中执行命令jps

node1中应该看到nimbus进程

node2和node3中应该看到supervisor进程

在node1中启动浏览器,访问node1:8080,可看到以下网页

可以看到node2和node3,实验结束


实验至此结束,感谢阅读本文。

文中所有图片均添加水印,严禁任何方式盗用或转载本文及文中图片

相关推荐
论文复现现场10 小时前
RTX 4090 24GB 能跑 Qwen3.8-27B 吗?单卡显存计算与云端部署指南
人工智能·python·云计算·llama·gpu算力
聚搜云——JuSouClouD14 小时前
杭州腾讯云代理商:腾讯云2核4G服务器够用吗?网站、API和开发测试怎么选
服务器·云计算·腾讯云
范桂飓18 小时前
AWS Kiro Agent 架构解析
架构·云计算·aws
yunlaodacom20 小时前
腾讯云国际站代理商:TKE镜像500MB和5GB,Pod冷启动能差多少?镜像拉取与启动优
5g·云计算·腾讯云
青软青之LIMS20 小时前
King‘s LIMS如何成为快消品行业质量安全的“数字护城河“
安全·云计算
Neighbor_OldY1 天前
云上安全配置审计与误配置修复实战:从安全组、OSS、RAM到数据库的全栈排查复盘
大数据·运维·安全·云计算
zx_741484812 天前
【Linux入门】Linux 安装:VMware Workstation Pro 安装 CentOS 7 保姆级图文教程
linux·centos
IT爱学堂2 天前
新版Linux零基础入门到高手Rocky版本-替换CentOS(完结)
linux·运维·centos
翼龙云_cloud2 天前
腾讯云国际代理商:如何用云服务器快速部署WorkBuddy AI助手?
服务器·人工智能·云计算·腾讯云
dazhong20122 天前
Docker 进阶篇(一) CentOS 7 离线升级 Docker 完整实战
docker·容器·centos