【面经】谈谈你对FastDFS的了解

FastDFS是什么

FastDFS是一个开源的轻量级分布式文件系统,
它对文件进行管理,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题。
特别适合以文件为载体的在线服务,如相册网站、视频网站等等。
FastDFS为互联网量身定制,充分考虑了冗余备份、负载均衡、在线扩容等机制,并注重高可用、高性能等指标,使用FastDFS很容易搭建一套高性能的文件服务器集群提供文件上传、下载等服务

FastDFS 作用

适合用来存储用户图片、视频、文档等文件。
出于简洁考虑,FastDFS没有对文件做分块存储,因此不太适合分布式计算场景

FastDFS架构设计

Tracker server:追踪服务器,负责管理文件存储和同步,可以有多台,客户端和Storage server主动连接Tracker server。

Storage server:存储服务器,负责文件存储和同步,可以有多台,连接Tracker server和文件服务器,启动一个单独的线程来完成对一台Tracker server的连接和定时报告。

Client:客户端,连接Tracker server和文件服务器,通过API实现文件的上传和下载。

在FastDFS中,Tracker server之间相互独立,不存在直接联系。
客户端和Storage server主动连接Tracker server。
Storage server主动向Tracker server报告其状态信息,包括磁盘剩余空间、文件同步状况、文件上传下载次数等统计信息。
Storage server会连接集群中所有的Tracker server,向他们报告自己的状态。

FastDFS优缺点

优点

适合中小文件存储(建议范围:4KB<file_size<500MB)。
主备Tracker服务,增强系统的可用性。
系统不需要支持POSIX,这样的话就降低了系统的复杂度,使得处理的速度会更高。
支持主从文件,支持自定义扩展名。
支持在线扩容机制,增强了系统的可扩展性。
实现了软RAID,增强了系统的并发处理能力和数据容错恢复能力

缺点

直接按文件存储,可直接读取文件内容,缺乏文件安全性。
通过API下载,存在单点的性能瓶颈。
不支持断点续传,对大文件将是噩梦。
同步机制不支持文件正确性校验,降低了系统的可用性。
不支持POSIX通用接口访问,通用性比较的低。
对跨公网的文件同步,存在着比较大的延迟,需要应用做相应的容错策略
相关推荐
无休居士13 天前
【初出江湖】分布式之什么是分布式存储?
分布式·分布式数据库·分布式存储·分布式文件系统·分布式存储的应用场景·集中式存储
莫愆22 天前
Linux | Ubuntu 16.04.4 通过docker安装单机FastDFS
linux·ubuntu·fastdfs
西华彭于晏!1 个月前
物联网架构之Hadoop(分布式文件系统与企业级应用)
java·hadoop·架构·分布式文件系统
冒冒菜菜3 个月前
云计算导论(3)---分布式文件系统
云计算·分布式文件系统·课程学习
妙BOOK言5 个月前
Octopus+: An RDMA-Enabled Distributed Persistent Memory File System——泛读笔记
论文阅读·分布式文件系统
妙BOOK言5 个月前
Finding a needle in Haystack: Facebook’s photo storage——论文泛读
论文阅读·元数据·分布式文件系统
妙BOOK言5 个月前
Cassandra - A Decentralized Structured Storage System——论文阅读
论文阅读·元数据·分布式文件系统
打野二师兄6 个月前
二、实现fastdfs文件上传与延迟删除功能的Spring Boot项目
java·spring boot·fastdfs
神奇的海马体1 年前
Docker部署Nginx+FastDFS插件
nginx·docker·容器·fastdfs