Day38-50-200台中等规模集群架构搭建开始

Day38-50-200台中等规模集群架构搭建开始

  • [1. 什么是集群?](#1. 什么是集群?)
  • [2. 为什么企业要用集群?](#2. 为什么企业要用集群?)
  • [3. 集群特点](#3. 集群特点)
  • [4. 集群架构是什么样子的?形象描述集群](#4. 集群架构是什么样子的?形象描述集群)
  • [5. 集群内服务软件说明](#5. 集群内服务软件说明)

1. 什么是集群?

简单地说,集群就是一堆机器做同一件事。

例如:

www.jd.com提供卖东西服务这就是一件事,可能是几千台服务器,在背后运转支撑这个网站。

www.baidu.com看着就是一个搜索框,背后可能是上万台服务器。

2. 为什么企业要用集群?

a.数据安全(数据不丢,数据不泄露)。

b.7*24服务,需要多台机器同时工作,互为实时备份。

c.高并发访问,需要多台服务器同时提供服务。

3. 集群特点

a.数据量大、用户多 海量数据

b.7*24持续服务,持续服务,高可用

c.高并发大流量

d.用户分布广泛,网络情况复杂。

4. 集群架构是什么样子的?形象描述集群

5. 集群内服务软件说明

DNS服务:阿里云DNS(https://www.dnspod.cn/)、腾讯DNS、硬件F5、bind、powerDNS

CDN服务:阿里CDN,腾讯CDN,网宿CDN、CHINACACHE、七牛(squid/nginx/varnish)+智能DNS

防火墙:硬件防火墙:金盾、思科、华为,iptables,firewalld

负载均衡:nginx(L4和L7),lvs(L4),Haproxy(L4和L7)

高可用:keepalived,heartbeat

静态Web服务:Nginx,Apache,IIS(图片、文件、html)

动态Web服务:php语言(php-fpm),java(tomcat,resin,weblogic),Python(Python)

数据库服务:MySQL(mariadb),oracle,PostgreSQL(关系型数据库)

非关系数据库:Mongodb,Redis,hbase

存储服务:NFS,MFS,FASTDFS,CEPH,HADOOP

复制备份:rsync,sersync,drbd(block)

定时备份(crond+rsync),实时备份(rsync+sersnc)

ELFK分布式日志集群(ELK)

Filebeat数据收集

Elasticsearch数据存储

Logstash数据处理

kibana分析和展示

Kafaka消息队列

Zookeeper集群

Hadoop大数据存储

VPN:服务:硬件VPN,openvpn,pptp

跳板机:硬件跳板机,jumpserver(可视化、记录)

批量管理:ansible,saltstak,puppet,cfengine,ssh(key),xshell(SecurCRT),expect,ssh-pass

监控服务:nagios,Zabbix,Prometheus(普罗米修斯),grafana

zabbix+Prometheus+grafana

Sonar系列之SonarQube

监控:

底层基础架构环境

KVM虚拟化服务

Openstack云计算服务

Docker容器服务

Kubernetes(K8S)集群服务

阿里云/腾讯云公有云实战

Kubernetes(K8S)集群服务

重点:

这个图流利讲出来。

预习:

1.Centos7.9(定制分区)

2.基础优化

3.集群规划

4.讲rsync

服务器说明 eth0外网IP(NAT) eth1内网IP(NAT) 主机名称规划
A1-负载服务器01 10.0.0.5/24 172.16.1.5/16 lb01
A2-负载服务器02 10.0.0.6/24 172.16.1.6/16 lb02
B1-web服务器1 10.0.0.7/24 172.16.1.7/16 web01
B2-web服务器2 10.0.0.8/24 172.16.1.8/16 web02
SB1-web服务器1 10.0.0.9/24 172.16.1.9/16 sweb01
SB2-web服务器2 10.0.0.10/24 172.16.1.10/16 sweb02
C1-NFS存储服务器 10.0.0.31/24 172.16.1.31/16 nfs01
C2-rsync备份服务器 10.0.0.41/24 172.16.1.41/16 backup
C3-MySQL数据库服务器 10.0.0.51/24 172.16.1.51/16 db01
X-管理服务器 10.0.0.61/24 172.16.1.61/16 m01
相关推荐
_.Switch41 分钟前
Python Web 应用中的 API 网关集成与优化
开发语言·前端·后端·python·架构·log4j
韩楚风2 小时前
【linux 多进程并发】linux进程状态与生命周期各阶段转换,进程状态查看分析,助力高性能优化
linux·服务器·性能优化·架构·gnu
陈苏同学2 小时前
4. 将pycharm本地项目同步到(Linux)服务器上——深度学习·科研实践·从0到1
linux·服务器·ide·人工智能·python·深度学习·pycharm
Ambition_LAO2 小时前
解决:进入 WSL(Windows Subsystem for Linux)以及将 PyCharm 2024 连接到 WSL
linux·pycharm
Pythonliu72 小时前
茴香豆 + Qwen-7B-Chat-Int8
linux·运维·服务器
你疯了抱抱我2 小时前
【RockyLinux 9.4】安装 NVIDIA 驱动,改变分辨率,避坑版本。(CentOS 系列也能用)
linux·运维·centos
追风赶月、2 小时前
【Linux】进程地址空间(初步了解)
linux
栎栎学编程2 小时前
Linux中环境变量
linux
我是哈哈hh3 小时前
专题十_穷举vs暴搜vs深搜vs回溯vs剪枝_二叉树的深度优先搜索_算法专题详细总结
服务器·数据结构·c++·算法·机器学习·深度优先·剪枝
郭二哈3 小时前
C++——模板进阶、继承
java·服务器·c++