CDN中动态自适应部署资源共享集群

本文分享自天翼云开发者社区《CDN中动态自适应部署资源共享集群》,作者:康****彬

一、背景技术

在CDN集群的网关内部自适应部署一个资源共享集群,且支持自动化部署、自动容灾,并且网关节点可以直接访问中心节点获取数据、写入数据,同组内网关节点通过内网访问,效率非常高。因此,如何给CDN网关提供一个安全、可靠且访问速度极快的资源共享集群成为了提升CDN厂商的竞争力的重要技术领域。而传统的CDN资源共享集群仍存在一些弊端。

二、实现该系统的主要技术手段如下:

1、基于CDN网关中节点间资源共享的技术,实现了CDN网关docker容器的启动与资源共享模块启动、停止分离,不会因为集群的停止而导致网关docker容器停止退出,以保证内部处理逻辑能自由控制资源共享集群的启动、停止以及故障之后重新自动部署资源共享集群;

2、集群选择第一台启动为中心节点,集群中每个节点上都有记录中心节点ip,每个节点提供两个端口,一个内部通信端口,一个外部访问端口,内外部隔离,提高数据同步和集群访问的效率;

3、由于集群每个节点保存了中心节点的ip,集群访问支持单ip访问,也支持多ip访问,增加了便利性;

4、一个集群选择5个节点,若有节点故障且不是正常的停止或者网关docker版本发布等,模块自动监控到这种情况,会进入故障处理模式;

5、故障模式处理,自动选择一台未部署资源共享模块节点进行自动化部署,中心节点异步同步数据到新节点上,即使没有多余的节点,也不影响集群的使用,实现了动态自适应部署,省去人工干预;

6、一个集群最多只需启动5台即可,其他节点根据集群的ip列表配置就可以进行访问。

三、资源共享集群系统构成图如下:

相关推荐
Vitaliy Kostrov(柯维远)5 天前
谁来承担额外工作?CDN 参与者如何协商资源
nginx·缓存·系统架构·开源·cdn
半桶水专家5 天前
CDN 原理详解:从底层架构到工程实践
架构·cdn
李纲明6 天前
WordPress 表单提交成功、线索却没到:SMTP、反垃圾与缓存/CDN 冲突怎么拆开查
cdn·wordpress·smtp·表单·网站运维
预立科技9 天前
CDN(内容分发网络)知识总结
网络·wpf·cdn
Linux运维技术栈1 个月前
如何避免绕过CDN的攻击?基于 CDN 回源请求头鉴权的防御实操与安全性剖析
nginx·安全·cdn
Lsetea1 个月前
CDN换了SSL证书仍显示旧证书?按边缘节点、SNI和缓存逐层排查
https·cdn·ssl证书·openssl·tls
SomeBottle1 个月前
【小记】图片托管从又拍云迁移到腾讯云 EO + COS(兼容图片处理参数)
python·计算机网络·学习笔记·对象存储·cdn·折腾
Mycdn_WD1 个月前
从 AI 爬虫变多了到 AI 抓取开始分流,CDN 行业进入下一阶段
人工智能·爬虫·cdn·pcdn·城域网·pcdn资源招募
进哥AI研习社2 个月前
缓存策略三层模型——CDN、Service Worker 与 HTTP 缓存
isr·cdn·缓存策略·cache-control·service worker·http 缓存·stale-while