副本数不足就拒写?HDFS 安全模式的 “保守” 设计是否合理?

安全模式

NameNode在启动的时候,首先将映射文件fsimage载入内存,并执行编辑日志edits中的各项操作,一旦在内存中成功建立文件系统元数据的映射,则创建一个新的fsimage文件(这个操作不需要SecondaryNameNode)和一个空的编辑日志。在这个过程中NameNode是运行在安全模式的,即此时是只读的。

在安全模式下,NameNode收集各个DataNode的报告,当数据块达到最小副本数以上时,会被认为是安全的,在一定比例的数据块被确定安全后,再过一段时间安全模式结束;当检测到副本数不足的数据块时,该块会被复制直到达到最小副本数,系统中数据块的位置并不是由NameNode维护的,而是以块列表的形式存储在DataNode中

参考文献

相关推荐
code_pgf13 小时前
AI-Agent记忆机制分析
大数据·人工智能
cc57250265316 小时前
挑选大数据专业院校,重点参考哪几项指标
大数据
shushangyun_19 小时前
2026智能采购商城系统选型指南:如何引领企业数字化采购升级
java·大数据·数据库·人工智能·机器学习
利威尔·1 天前
常用git命令
大数据·elasticsearch·搜索引擎
一份汉堡套餐1 天前
7月最新大模型排名
大数据·人工智能
ganbingfenxiang1 天前
山西干冰零售
大数据·人工智能·python·零售
ZeekerLin1 天前
AI时代,企业核心业务中台化建设思考
大数据·人工智能·企业ai转型
2601_949936961 天前
2026会计岗位职场能力提升方法分享
大数据
咖啡屋和酒吧1 天前
无锡干细胞领域发展纪实
大数据·人工智能
SelectDB1 天前
阶跃星辰 Agent 可观测实践:为什么 Trace 数据底座选择 SelectDB?
大数据·数据库·agent