大型网站系统架构演化实例_6.使用分布式文件系统和分布式数据库系统

1.使用分布式文件系统和分布式数据库系统

任何强大的单一服务器都满足不了大型网站持续增长的业务需求。数据库经过读写分离后,从一台服务器拆分成两台服务器,但是随着网站业务的发展依然不能满足需求,这时需要使用分布式数据库。文件系统也一样,需要使用分布式文件系统。分布式数据库是网站数据库拆分的最后手段,只有在单表数据规模非常庞大的时候才使用。不到不得已时,网站更常用的数据库拆分手段上业务分库,将不同业务的数据部署在不同的物理服务器上。

此时,网站系统架构如图1所示。

图1 第七阶段网站架构

2.分布式文件服务器

分布式文件服务器是一种用于存储和管理文件的计算机系统,它可以在多个节点上分布存储数据,以提高数据的可靠性、可用性和性能。

分布式文件系统:Distributed file system, DFS,又叫做网络文件系统:Network File System。一种允许文件通过网络在多台主机上分享的文件系统,可让多机器上的多用户分享文件和存储空间。

FastDFS是用c语言编写的一款开源的分布式文件系统,充分考虑了冗余备份、负载均衡、线性扩容等机制,并注重高可用、高性能等指标,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题。特别适合中小文件(建议范围:4KB < file_size <500MB),对以文件为载体的在线服务,如相册网站、视频网站等。

3.分布式数据库服务器

分布式数据库是指将数据存储在多个服务器上,并通过网络连接进行通信和协调,从而实现数据的分布式存储和处理。

分布式数据库的优势

  • 扩展性: 分布式数据库可以轻松地扩展,通过增加节点来应对数据规模的增长,无需对整个系统进行重构。

  • 高可用性: 分布式数据库通常具备数据冗余和故障转移的能力,即使部分节点发生故障,数据仍然可用。

  • 性能: 分布式数据库可以将数据分布在多个节点上,从而减少单节点的负载,提升查询性能。

  • 灵活性: 分布式数据库可以根据不同的业务需求和数据类型选择合适的存储引擎和分布策略。

相关推荐
镜舟科技13 分钟前
时序数据库、实时数据库与实时数仓:如何为实时数据场景选择最佳解决方案?
数据库·物联网·数据分析·时序数据库·olap·实时数仓·实时数据库
麻雀无能为力1 小时前
CAU数据库class2 SQL语言
数据库·sql·oracle
uncle_ll1 小时前
Dify-3:系统架构
系统架构·llm·agent·dify·rag
蓝天居士1 小时前
软考 系统架构设计师系列知识点之杂项集萃(63)
系统架构
晗晗老板儿1 小时前
系统架构设计-案例分析总结
系统架构
安安csdn1 小时前
系统架构设计师考前冲刺笔记-第1章-系统工程与信息系统基础
笔记·系统架构
夜松云1 小时前
Qt框架核心组件完全指南:从按钮交互到定时器实现
数据库·qt·交互·信号与槽·ui组件·容器类·定时器机制
Elastic 中国社区官方博客1 小时前
JavaScript 中使用 Elasticsearch 的正确方式,第一部分
大数据·开发语言·javascript·数据库·elasticsearch·搜索引擎·全文检索
vvilkim2 小时前
深度解析:Redis 性能优化全方位指南
数据库·redis·性能优化
小光学长2 小时前
基于vue框架的东莞市二手相机交易管理系统5yz0u(程序+源码+数据库+调试部署+开发环境)带论文文档1万字以上,文末可获取,系统界面在最后面。
数据库