Day38-50-200台中等规模集群架构搭建开始

Day38-50-200台中等规模集群架构搭建开始

  • [1. 什么是集群?](#1. 什么是集群?)
  • [2. 为什么企业要用集群?](#2. 为什么企业要用集群?)
  • [3. 集群特点](#3. 集群特点)
  • [4. 集群架构是什么样子的?形象描述集群](#4. 集群架构是什么样子的?形象描述集群)
  • [5. 集群内服务软件说明](#5. 集群内服务软件说明)

1. 什么是集群?

简单地说,集群就是一堆机器做同一件事。

例如:

www.jd.com提供卖东西服务这就是一件事,可能是几千台服务器,在背后运转支撑这个网站。

www.baidu.com看着就是一个搜索框,背后可能是上万台服务器。

2. 为什么企业要用集群?

a.数据安全(数据不丢,数据不泄露)。

b.7*24服务,需要多台机器同时工作,互为实时备份。

c.高并发访问,需要多台服务器同时提供服务。

3. 集群特点

a.数据量大、用户多 海量数据

b.7*24持续服务,持续服务,高可用

c.高并发大流量

d.用户分布广泛,网络情况复杂。

4. 集群架构是什么样子的?形象描述集群

5. 集群内服务软件说明

DNS服务:阿里云DNS(https://www.dnspod.cn/)、腾讯DNS、硬件F5、bind、powerDNS

CDN服务:阿里CDN,腾讯CDN,网宿CDN、CHINACACHE、七牛(squid/nginx/varnish)+智能DNS

防火墙:硬件防火墙:金盾、思科、华为,iptables,firewalld

负载均衡:nginx(L4和L7),lvs(L4),Haproxy(L4和L7)

高可用:keepalived,heartbeat

静态Web服务:Nginx,Apache,IIS(图片、文件、html)

动态Web服务:php语言(php-fpm),java(tomcat,resin,weblogic),Python(Python)

数据库服务:MySQL(mariadb),oracle,PostgreSQL(关系型数据库)

非关系数据库:Mongodb,Redis,hbase

存储服务:NFS,MFS,FASTDFS,CEPH,HADOOP

复制备份:rsync,sersync,drbd(block)

定时备份(crond+rsync),实时备份(rsync+sersnc)

ELFK分布式日志集群(ELK)

Filebeat数据收集

Elasticsearch数据存储

Logstash数据处理

kibana分析和展示

Kafaka消息队列

Zookeeper集群

Hadoop大数据存储

VPN:服务:硬件VPN,openvpn,pptp

跳板机:硬件跳板机,jumpserver(可视化、记录)

批量管理:ansible,saltstak,puppet,cfengine,ssh(key),xshell(SecurCRT),expect,ssh-pass

监控服务:nagios,Zabbix,Prometheus(普罗米修斯),grafana

zabbix+Prometheus+grafana

Sonar系列之SonarQube

监控:

底层基础架构环境

KVM虚拟化服务

Openstack云计算服务

Docker容器服务

Kubernetes(K8S)集群服务

阿里云/腾讯云公有云实战

Kubernetes(K8S)集群服务

重点:

这个图流利讲出来。

预习:

1.Centos7.9(定制分区)

2.基础优化

3.集群规划

4.讲rsync

服务器说明 eth0外网IP(NAT) eth1内网IP(NAT) 主机名称规划
A1-负载服务器01 10.0.0.5/24 172.16.1.5/16 lb01
A2-负载服务器02 10.0.0.6/24 172.16.1.6/16 lb02
B1-web服务器1 10.0.0.7/24 172.16.1.7/16 web01
B2-web服务器2 10.0.0.8/24 172.16.1.8/16 web02
SB1-web服务器1 10.0.0.9/24 172.16.1.9/16 sweb01
SB2-web服务器2 10.0.0.10/24 172.16.1.10/16 sweb02
C1-NFS存储服务器 10.0.0.31/24 172.16.1.31/16 nfs01
C2-rsync备份服务器 10.0.0.41/24 172.16.1.41/16 backup
C3-MySQL数据库服务器 10.0.0.51/24 172.16.1.51/16 db01
X-管理服务器 10.0.0.61/24 172.16.1.61/16 m01
相关推荐
风清再凯12 分钟前
docker镜像的构建image
运维·docker·容器
饭碗、碗碗香12 分钟前
【开发常用命令】:docker常用命令
linux·运维·笔记·学习·docker·容器
曼岛_28 分钟前
[架构之美]深入优化Spring Boot WebFlux应用
spring boot·后端·架构
懒羊羊大王呀29 分钟前
Ubuntu20.04中MySQL的安装和配置
linux·mysql·ubuntu
浅安的邂逅35 分钟前
Ubuntu apt-get安装-报错:尝试“apt --fix-broken install”有未能满足的依赖关系,几种解决办法
linux·ubuntu·apt install
雨果talk38 分钟前
【一文看懂Spring循环依赖】Spring循环依赖:从陷阱破局到架构涅槃
java·spring boot·后端·spring·架构
williamdsy1 小时前
【WebSocket】WebSocket架构重构:从分散管理到统一连接的实战经验
websocket·重构·架构·实战·统一管理
鸡鸭扣1 小时前
25年春招:米哈游运维开发一面总结
运维·面试·求职招聘·运维开发·面经·sre·米哈游
Auv开心1 小时前
ubuntu22.04和ubuntu20.04 的ssh配置不然repo init失败
运维·ssh
星垣矩阵架构师1 小时前
架构设计之存储高性能——非关系型数据库(NoSQL)
数据库·架构·nosql