Day38-50-200台中等规模集群架构搭建开始

Day38-50-200台中等规模集群架构搭建开始

  • [1. 什么是集群?](#1. 什么是集群?)
  • [2. 为什么企业要用集群?](#2. 为什么企业要用集群?)
  • [3. 集群特点](#3. 集群特点)
  • [4. 集群架构是什么样子的?形象描述集群](#4. 集群架构是什么样子的?形象描述集群)
  • [5. 集群内服务软件说明](#5. 集群内服务软件说明)

1. 什么是集群?

简单地说,集群就是一堆机器做同一件事。

例如:

www.jd.com提供卖东西服务这就是一件事,可能是几千台服务器,在背后运转支撑这个网站。

www.baidu.com看着就是一个搜索框,背后可能是上万台服务器。

2. 为什么企业要用集群?

a.数据安全(数据不丢,数据不泄露)。

b.7*24服务,需要多台机器同时工作,互为实时备份。

c.高并发访问,需要多台服务器同时提供服务。

3. 集群特点

a.数据量大、用户多 海量数据

b.7*24持续服务,持续服务,高可用

c.高并发大流量

d.用户分布广泛,网络情况复杂。

4. 集群架构是什么样子的?形象描述集群

5. 集群内服务软件说明

DNS服务:阿里云DNS(https://www.dnspod.cn/)、腾讯DNS、硬件F5、bind、powerDNS

CDN服务:阿里CDN,腾讯CDN,网宿CDN、CHINACACHE、七牛(squid/nginx/varnish)+智能DNS

防火墙:硬件防火墙:金盾、思科、华为,iptables,firewalld

负载均衡:nginx(L4和L7),lvs(L4),Haproxy(L4和L7)

高可用:keepalived,heartbeat

静态Web服务:Nginx,Apache,IIS(图片、文件、html)

动态Web服务:php语言(php-fpm),java(tomcat,resin,weblogic),Python(Python)

数据库服务:MySQL(mariadb),oracle,PostgreSQL(关系型数据库)

非关系数据库:Mongodb,Redis,hbase

存储服务:NFS,MFS,FASTDFS,CEPH,HADOOP

复制备份:rsync,sersync,drbd(block)

定时备份(crond+rsync),实时备份(rsync+sersnc)

ELFK分布式日志集群(ELK)

Filebeat数据收集

Elasticsearch数据存储

Logstash数据处理

kibana分析和展示

Kafaka消息队列

Zookeeper集群

Hadoop大数据存储

VPN:服务:硬件VPN,openvpn,pptp

跳板机:硬件跳板机,jumpserver(可视化、记录)

批量管理:ansible,saltstak,puppet,cfengine,ssh(key),xshell(SecurCRT),expect,ssh-pass

监控服务:nagios,Zabbix,Prometheus(普罗米修斯),grafana

zabbix+Prometheus+grafana

Sonar系列之SonarQube

监控:

底层基础架构环境

KVM虚拟化服务

Openstack云计算服务

Docker容器服务

Kubernetes(K8S)集群服务

阿里云/腾讯云公有云实战

Kubernetes(K8S)集群服务

重点:

这个图流利讲出来。

预习:

1.Centos7.9(定制分区)

2.基础优化

3.集群规划

4.讲rsync

服务器说明 eth0外网IP(NAT) eth1内网IP(NAT) 主机名称规划
A1-负载服务器01 10.0.0.5/24 172.16.1.5/16 lb01
A2-负载服务器02 10.0.0.6/24 172.16.1.6/16 lb02
B1-web服务器1 10.0.0.7/24 172.16.1.7/16 web01
B2-web服务器2 10.0.0.8/24 172.16.1.8/16 web02
SB1-web服务器1 10.0.0.9/24 172.16.1.9/16 sweb01
SB2-web服务器2 10.0.0.10/24 172.16.1.10/16 sweb02
C1-NFS存储服务器 10.0.0.31/24 172.16.1.31/16 nfs01
C2-rsync备份服务器 10.0.0.41/24 172.16.1.41/16 backup
C3-MySQL数据库服务器 10.0.0.51/24 172.16.1.51/16 db01
X-管理服务器 10.0.0.61/24 172.16.1.61/16 m01
相关推荐
Tim风声(网络工程师)2 小时前
光功率计中的红光(光衰测试设备)的使用
运维·网络
ar01233 小时前
AR电路巡检:让电力运维进入智能可视化时代
运维·人工智能·ar
低调小一3 小时前
Midscene.js 原理拆解:它不是“自然语言点按钮”,而是一套会看屏幕的 UI 自动化运行时
人工智能·rnn·架构·大模型·transformer·tdd·midscene
island13143 小时前
【C++仿Muduo库#3】Server 服务器模块实现上
服务器·开发语言·c++
天天进步20153 小时前
魔音漫创源码解析:状态管理——复杂长链路下的状态同步:Zustand 在多面板协作中的应用
开发语言·架构
茉莉玫瑰花茶4 小时前
LangGraph 介绍
服务器·网络·数据库
mfxcyh4 小时前
如何把对象数据转化为数组
java·服务器·前端
2301_780789664 小时前
云服务器数据会泄露吗?怎么保护云服务器的数据
运维·服务器·tcp/ip·网络安全
2301_780789664 小时前
云服务器被黑能恢复吗?云服务器被黑的解决办法
运维·服务器·网络·安全·web安全
淘小白_TXB21964 小时前
头条百家采集改写发布软件用户使用手册
运维·服务器·头条采集·头条号采集·文章采集·头条采集软件